搜索[数据脱敏]结果-低调大师优秀个人博客

精选列表

搜索[数据脱敏]，共10000篇文章

利用amoeba(变形虫)实现mysql数据库读写分离

由于proxy是基于lua脚本语言实现的，所以网上不少网友表示proxy效率不高，也不稳定，不建议在生产环境使用；amoeba是阿里开发的一款数据库读写分离的项目(读写分离只是它的一个小功能)，由于是基于

2019-05-05

5月数据库排行：PostgreSQL 增长放缓，Redis 下跌

【大咖・来了第7期】10月24日晚8点观看《智能导购对话机器人实践》 DB-Engines 数据库流行度排行榜发布了 5月份的数据，排名前二十如下：前六名千年不变，分别是：Oracle、MySQL、

2019-05-04

Redis 跳表（一种高性能的动态数据结构）

一、前言跳表（Skip List）这种数据结构在一般的数据结构书籍和算法书籍里都不怎么涉及----至少我大学数据结构课程没有讲这种结构。

2019-05-04

Python爬虫入门教程 17-100 CSDN博客抓取数据

打开F12抓取一下数据API，很容易就获取到了他的接口提取链接长成这个样子 https://blog.csdn.net/api/articles?

2019-04-29

大数据学习难度大吗？哪些人适合学习呢？

互联网的快速发展，科技的不断进步，使得数据呈爆炸式增长，而大数据的价值也开始被各个领域所重视，各大企业都开始纷纷高薪聘请大数据专业人才，所以，很多从事IT开发的人开始转行以谋求更好的发展，而对于那些没有编程基础的小白

2019-04-22

NLPIR大数据分词技术行业信息挖掘的推动者

北京理工大学大数据搜索与挖掘实验室张华平主任研发的NLPIR大数据语义智能分析技术是满足大数据挖掘对语法、词法和语义的综合应用。

2019-04-16

基于TableStore的海量气象格点数据解决方案实战

前言气象数据是一类典型的大数据，具有数据量大、时效性高、数据种类丰富等特点。

2019-04-16

大数据时代的到来，为我们提供了哪些便利之处？

下面来说说大数据时代的到来，为我们提供了哪些便利之处？ 1、在大数据时代，商业生态环境不断得发生着巨大变化。

2019-04-15

bin-log-distributor消费数据丢失问题解决记录

bin-log-distributor项目简介 bin-log-distributor是凯京科技开源的Mysql数据库数据变动实时监听分发中间件，详情见码云开源地址, github开源地址背景线上反馈有

2019-04-14

Redis 单数据多源超高并发下的解决方案

Redis 是目前最流行的KV缓存数据库，它简单易用，安全稳定，在互联网行业有着非常广泛的应用。本文主要给大家分享一下 Redis 在单数据多源超高并发访问下的解决思路和方案。

2019-04-14

大数据最核心的关键技术——32个算法，必看！！

3、二分查找(Binary Search)——在线性数组中找特定值的算法，每个步骤去掉一半不符合要求的数据。

2019-04-12

大数据开发你需要知道的十个技术

Hadoop设计用于将计算更接近数据节点，同时采用了HDFS文件系统的大规模横向扩展功能。虽然，通常解决Hadoop管理自身数据低效性的方案是将Hadoop 数据存储在SAN上。

2019-04-10

从0到1使用Kubernetes系列（六）：数据持久化实战

在实际应用当中，开发者有很多时候需要将容器中的数据保留下来，比如在Kubernetes中部署了MySql，不能因为MySql容器挂掉重启而上面的数据全部丢失；其次，在 Pod 中同时运行多个容器时，这些容器之间可能需要共享文件

2019-04-10

物联网数据可视化很难？？？你只需要它~~~

楼主是个喜欢探索的好猿，自从上次玩了下阿里云物联网数据分析的二维可视化以后，发现还有很多新玩法可以解锁（参见楼主的上一篇博文将你的物联网设备位置快速接入到地图上，只需要10分钟！）。

2019-04-03

基于HBase和Spark构建企业级数据处理平台

摘要：在中国HBase技术社区第十届Meetup杭州站上，阿里云数据库技术专家李伟为大家分享了如何基于当下流行的HBase和Spark体系构建企业级数据处理平台，并且针对于一些具体落地场景进行了介绍。

2019-03-31

书籍:Data Cleaning数据清洗-基于shell和python - 2018.pdf

简介作为最畅销的口袋入门系列的一部分，本书旨在为程序员提供足够的数据清理知识，以便能够在自己的项目中工作。

2019-03-27

一、同步方式选择一个机器，作为时间服务器(这里选择hadoop01)，所有的机器与这台集群时间进行定时的同步，比如，每隔十分钟，同步一次时间。二、所需工具时间同步服务器有两个：ntpd和ntpdatp。虽然使用二者都能达到时间同步的目的，但是使用之前得弄清楚一个问题，ntpd与ntpdate在更新时间时有什么区别。ntpd不仅仅是时间同步服务器，它还可通过客户端与标准时间服务器进行时间同步，而且是平滑同步，并非ntpdate立即同步，在生产环境中慎用ntpdate，也正如此两者不可同时运行。三、具体操作步骤时间服务器配置 (1)检查ntp是否安装。 [root@hadoop01 Desktop]# rpm -qa|grep ntp如果显示 ntp-4.2.6p5-1.el6.centos.x86_64 . fontpackages-filesystem-1.41-1.1.el6.noarch ntpdate-4.2.6p5-1.el6.centos.x86_64则证明ntp已经安装，否则要先安装ntp服务。[root@hadoop01 Desktop]# yum install -y ntp. (2)修改ntp 配置文件[root@hadoop01 Desktop]# vi /etc/ntp.conf. 先配置客户端的授权，也就是给指定的机器(客户端)设置访问NTP Server的权限，这是通过restrict配置项实现的。将#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap释放。改为restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap.如果集群是在一个封闭的局域网内，可以屏蔽掉默认的server。将server 0.centos.pool.ntp.org iburst.server 1.centos.pool.ntp.org iburst. server 2.centos.pool.ntp.org iburst.server 3.centos.pool.ntp.org iburst屏蔽改为 #server 0.centos.pool.ntp.org iburst.#server 1.centos.pool.ntp.org iburst.#server 2.centos.pool.ntp.org iburst.#server 3.centos.pool.ntp.org iburst.将本机的本地时钟作为时间供给源，这样，即便它失去网络连接，它也可以继续为网络提供服务增加server 127.127.1.0 fudge 127.127.1.0 stratum.修改/etc/sysconfig/ntpd 文件 [root@hadoop01 Desktop]# vim /etc/sysconfig/ntpd增加SYNC_HWCLOCK=yes之后重启ntpd，[root@hadoop01 Desktop]# service ntpd restart，设置ntpd开机默认启动[root@hadoop01 Desktop]# chkconfig mtpd on。完成以上操作以后，使用date命令查看系统时间与当前时间是否对应，如果还不对应，应该是时区的问题。修改时区[root@hadoop01 Desktop]# tzselect。根据提示选择正确的时区，然后将cp /usr/share/zoneinfo/Asia/Shanghai设置为到/etc/localtime的链接 [root@hadoop01 Desktop]# cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime 四、其他机器配置配置每十分钟与时间服务器同步一次需要在集群中其他的机器中都编写时间同步脚本，这里以hadoop02为例，[root@hadoop02 Desktop]# crontab –e. /10 * /usr/sbin/ntpdate hadoop01 重启crond服务。 [root@hadoop02 Desktop]# service crond restart。如果需要，同样要修改时区，操作同上。

2019-03-27

终于揪出数据库负载高的元凶：高效云盘

通过排查，是mysql数据库卡住了，数据库错误日志看，有大量如下信息：企图修改数据库选项文件/etc/my.cnf相关的值，来消除问题，效果甚微，修改的两项如下： interactive_timeout

2019-03-22

2019大数据学习路线指南（最全知识点总结）

大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、

2019-03-18

云数据库将进入企业级百万IOPS时代

数据库，特别是关系型数据库由于需要处理实时业务，因此几乎所有变化的数据都必须完成落盘写入，以实现ACID的各项要求，特别针对持久性。因此更高的IOPS对于数据库整体性能提升有着至关重要的意义。

2019-03-14

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。