搜索[数据脱敏]结果-低调大师优秀个人博客

精选列表

搜索[数据脱敏]，共10000篇文章

QuickBI助你成为分析师-数据建模（一）

产品核心流程第二步为创建数据集，进行数据建模，如果说数据是海，那么创建数据集并合理建模就是划船的浆，有了浆才能在数据的海洋里畅游。

2018-04-01

基于大数据搭建社交好友推荐系统

好友推荐系统它的一个场景介绍，现在大家都在讲大数据，如果想去使用这些数据，我们认为它需要具备三个要素，第一个要素是海量的数据，数据量越多越好，只有数据量达到了足够大，我们才能够成为一个数据里面潜在去挖掘出来

2018-04-01

Python数据增强(data augmentation)库--Augmentor 使用介绍

Augmentor 使用介绍原图 1.random_distortion(probability, grid_height, grid_width, magnitude) 最终选择参数为 p.random_distortion(probability=0.8, grid_height=3, grid_width=3, magnitude=6) 其他参数效果： magnitude和grid_width,grid_height越大，扭曲程度越大 p.random_distortion(probability=0.6, grid_height=6, grid_width=6, magnitude=5) p.random_distortion(probability=0.6, grid_height=6, grid_width=6, magnitude=9) p.random_distortion(probability=0.6, grid_height=10, grid_width=10, magnitude=5) 2.random_erasing(probability, rectangle_area) rectangle_area表示覆盖区域的比例，值越大比例越大。但是设置为1的时候并不是全覆盖，不知道为什么，反正也没必要弄清楚 p.random_erasing(1,1) 3.zoom_random(probability, percentage_area) 放大图片，然后按照percenta_area的比例对图片进行crop。 p.zoom_random(probability=1, percentage_area=0.2) p.zoom_random(probability=1, percentage_area=0.8) 4.zoom(probability, min_factor, max_factor) p.zoom(probability=1, min_factor=1.1, max_factor=1.5) p.zoom(probability=1, min_factor=2, max_factor=2) 组合操作 p.rotate_random_90(probability=0.8) p.random_distortion(probability=0.8, grid_height=3, grid_width=3, magnitude=6) p.random_erasing(0.3, 0.2) p.zoom(probability=0.4, min_factor=1.1, max_factor=1.5) p.sample(6) MARSGGBO原创 2018-4-1

2018-03-31

数据管理和分析趋势正在改变世界

数据分层也许你熟悉数据分层的概念，比如数据存储与其访问频率的相关性。

2018-03-29

Kotlin数据类型（二：装箱和拆箱）

蛮多人很疑惑，在Kotlin中，数据类型的装箱和拆箱怎么整一、先看下Java中的装箱和拆箱例如： /** * @author:wangdong * @description: */ public class

2018-03-28

Python数据挖掘与机器学习技术入门实战

本次课程包含了五个知识点： 1.数据挖掘与机器学习技术简介 2.Python数据预处理实战 3.常见分类算法介绍 4.对鸢尾花进行分类案例实战 5.分类算法的选择思路与技巧一、数据挖掘与机器学习技术简介

2018-03-25

Docker系列教程14-Docker数据持久化

原文：http://www.itmuch.com/docker/14-docker-volume/ 容器中数据持久化主要有两种方式：数据卷（Data Volumes）数据卷容器（Data Volumes

2018-03-22

大数据存储平台调优之Hadoop优化

/max用于在过滤数据的时候直接跳过数据单元，而所有这些统计值则可以在做聚合操作的时候直接采用，而不必解开这个数据单元做进一步的计算。

2018-03-17

Nutanix支持超融合环境中部署大数据

企业IT管理者现在可以在其私有云数据中心运行密集的大数据任务，既可确保公有云服务特有的精简性与可扩展性，又能为其IT基础设施赋予更大的灵活性。

2018-03-15

中国大数据科技传播联盟在京成立

以“大数据应用与创新”为主题的“2017年中国科技传播论坛”12月17日上午在北京中国科技会堂召开。

2018-03-06

“ABC”时代，IT变革下的驱动数据价值之路

云计算让分布式架构成为主流，大数据催生了海量数据，AI让数据对计算和算法产生新的需求。而这些技术推动的核心是数据本身的价值。

2018-03-05

大数据||zookeeper来实现HDFS自动故障转移

namenode启动都是standby。利用zookeeper来选举一个为active ZooKeeper客户端ZKFC： ZKFailoverController 给namenode添加失效备缓监控器（ZKFC： ZKFailoverController），131和132 NN HA 自动故障转移原理图 Zookeeper FC对Namenode进行生命状态监控原理图 zookeeper集群通过配置文件实现故障转移启用故障转移（hdfs-site.xml） <property> <name>dfs.ha.automatic-failover.enabled</name> <value>true</value> </property> 故障转移依赖zookeeper集群 <property> <name>ha.zookeeper.quorum</name> <value>hadoop-senior.beifeng.com:2181,hadoop-senior02.beifeng.com:2181,hadoop-senior03.beifeng.com:2181</value> </property> 自动故障转移启动关闭所有HDFS 服务 sbin/stop-dfs.sh（131节点）停止顺序：namenode->datanode->journalnode 向子节点（132/133）同步core-site.xml和hdfs-site.xml 命令：scp -r etc/hadoop/core-site.xml etc/hadoop/hdfs-site.xml root@hadoop-senior02.beifeng.com:/opt/app/hadoop-2.5.0/etc/hadoop/ 启动Zookeeper 集群 bin/zkServer.sh start （131,132,133）初始化 HA 在Zookeeper中状态 bin/hdfs zkfc -formatZK 对ha在zookeeper中的状态进行初始化在zookeeper服务器上创建一个目录（hadoop-ha）通过zookeeper客户端可以看一下这个过程。查看：bin/zkCli.sh -server 192.168.57.131:2181 注意添加ip要不然就会报错。命令执行前服务器目录结构前命令执行后 zookeeper client 启动HDFS服务 sbin/start-dfs.sh启动顺序 namenode-->datanode-->journalnode-->zkfc 131为active 干掉131看一下是否可以自动切换到132的namenode 131namenode服务器 132namenode编程active zookeeper集群死掉后不影响hdfs文件系统，只是不能够故障自动转移了。在各个NameNode节点上启动DFSZK Failover Controller，先在那台机器启动，那个机器的NameNode就是Active NameNode sbin/hadoop-daemon.sh start zkfc

2018-02-25

云上数据库容灾解决方案

目前常见的容灾方案基本上模式比较简单： 1、数据库冷备：每天备份一次数据库，保存在磁带或光盘上； 2、双机本地热备：共享磁盘阵列，阵列做RAID（冗余校验），即一份数据存在不同盘阵上并多存几份，保证坏一个盘不影响数据读写

2018-02-23

大数据||HDFS启动时安全模式（safemode）

安全模式期间：nameNode启动成功后到收到99.99%的datanode块数据。

2018-02-08

Python 数据科学入门教程：TensorFlow 目标检测

你应该得到以下结果：在下一个教程中，我们将介绍，如何通过稍微修改此示例代码，来实时标注来自网络摄像头流的数据。

2018-02-07

Spring MVC基于注解来格式化数据

信息的转换，格式化，验证对于前端数据来说，都是很有必要的。这里实现一下格式化数据。

2018-02-05

数据库MySql在python中的使用

随着需要存储数据的结构不断复杂化，使用数据库来存储数据是一个必须面临的问题。那么应该如何在python中使用数据库？下面就在本篇博客中介绍一下在python中使用mysql。

2018-02-04

自学深度学习，这些途径可以获取数据集

20个趣味数据集在Medium上有位叫Oliver Cameron的程序猿小哥特地分享了20个有趣的数据集，比如UFO目击报告等。

2018-02-02

Android开发学习笔记：数据存取之File浅析

Android系统中提供了一种文件读写的方法，可以将一些数据以文件的形式保存在设备中。比如一些word文档，PDF文档，图片，音频，视频文件等。

2018-01-31

Java读取、写入、处理Excel文件中的数据

1、Java读取Excel数据首先，创建一个xls文件（如：jxltest.xls），然后在文件中添加一些数据，Excel文件创建完成后，我们便可以开始写代码读取了：代码如下： [java]view

2018-01-23

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。