笔记列表-低调大师优秀个人博客

文章列表

共 97898 篇

2018-11-15

互联网分布式微服务云平台规划分析--系统管理平台

1.介绍鸿鹄云架构【系统管理平台】是一个大型企业、分布式、微服务、云架构的JavaEE体系快速研发平台，基于模块化、微服务化、原子化、热部署的设计思想，使用成熟领先的无商业限制的主流开源技术构建。采用服务化的组件开发模式，可实现复杂的业务功能。使用Maven进行项目的构建管理，采用Jenkins进行持续集成，主要定位于大型分布式企业系统或大型分布式互联网...

642

阅读约3分钟

2018-11-15

史上最全Redis高可用技术解决方案大全

继采访 “对话张冬洪 | 全面解读NoSQL数据库Redis的核心技术与应用实践” 发出后，很多朋友向我咨询关于里面提到的高可用的方案的优缺点以及如何选择合适的方案线上使用，刚好最近在给宜人贷，光大银行做企业内训的时候也详细讲过（广告一下：极数云舟不仅提供企业培训、技术咨询、解决方案，还有项目产品，欢迎勾搭～），这里我再整理发出来，供大家参考，如有不妥之处，...

602

阅读约12分钟

2018-11-15

从架构到平台， POWER 9处理器最全解读

本文根据IBM中国芯片设计部门高级经理尹文，在「智东西公开课」的超级公开课IBM专场《POWER 9-认知时代的驱动力》上的系统讲解整理而来。本次讲解中，尹文老师从内核微架构、总线互连、异构计算等方面对POWER 9处理器进行了系统讲解，并表示人工智能的发展，使得如何让整个硬件平台满足不断迭代和不断演化的算法成为一个挑战。大家也更加关注硬件和算法以及平台...

711

阅读约2分钟

2018-11-15

NLP-Progress记录NLP最新数据集、论文和代码: 助你紧跟NLP前沿

方向是自然语言处理的同学们有福啦，为了跟踪自然语言处理(NLP)的进展，有大量仁人志士在 Github 上维护了一个名为 NLP-Progress 的库。它记录了几乎所有NLP任务的 baseline 和标准数据集，同时还记录了这些问题的state-of-the-art。 ●Github ●https://github.com/sebastianrud...

721

阅读约4分钟

2018-11-15

pyhanlp 停用词与用户自定义词典功能详解

hanlp的词典模式之前我们看了hanlp的词性标注，现在我们就要使用自定义词典与停用词功能了，首先关于HanLP的词性标注方式具体请看HanLP词性标注集。其核心词典形式如下：自定义词典自定义词典有多种添加模式，首先是展示的一个小例子，展示了词汇的动态增加与强行插入，删除等。更复杂的内容请参考后边的第二段代码。简单的例子 from pyhanl...

690

阅读约20分钟

2018-11-15

双11奇迹背后的大数据平台，不喧哗，自有声！

00:02:05 成交额超100亿00:57:56 成交额超666亿01:47:26 成交额超1000亿15:49:39 成交额超1682亿22:28:37 成交额超2000亿 2018年双11新纪录2135亿高速跳转的数字，不断刷新的状态，光缆中狂奔的代码，键盘上飞舞的手指… 新的记录绝非十年前的记录也非2017年的记录是产品专家紧抓不放的记录是技术专...

729

阅读约2分钟

2018-11-15

开源大数据周刊-第107期

资讯英特尔AIDC大会：向AI开发者敞开怀抱，更加注重生态搭建11月14日，英特尔人工智能大会（AIDC 2018）在北京国贸酒店举行。这是英特尔第三次在中国举行人工智能大会，也是第一次专门面向开发者和技术社区。大会上，英特尔发布了Neural Compute Stick 2（神经计算棒二代），英特尔还展示了如何以底层计算能力赋能百度、腾讯、阿里、微软等合...

709

阅读约2分钟

2018-11-15

阿里云数据库10月刊：阿里云数据库获国际顶级研究机构认可服务中国十亿用户领跑数据时代

一、重点事件：Gartner公布2018全球数据库魔力象限阿里云是唯一入选中国企业国际知名调研机构Gartner公布了2018年全球数据库魔力象限评选结果，阿里云成为该领域最大黑马，以国内数据库市场份额第一的身份，首次入选并且进入远见者（Visionaries）象限，这是中国科技企业首次进入该榜单，意味着国产数据库开始和全球顶级的数据库服务厂商同台竞技。...

846

阅读约2分钟

2018-11-15

入选首个Forrester云数仓研究报告，“后起之秀”DataWorks有何魔力？

日前，全球权威IT咨询机构Forrester发布最新研究报告The Forrester WaveTM: CloudData Warehouse, Q4 2018，对云数据仓库从各个维度进行综合评判，帮助企业选择最佳解决方案。其中，阿里云DataWorks、MaxCompute、ADB等三款产品成功入选，并在产品功能（Current Offering）方面力压...

689

阅读约2分钟

2018-11-15

阿里云Elasticsearch性能优化实践

Elasticsearch是一款流行的分布式开源搜索和数据分析引擎，具备高性能、易扩展、容错性强等特点。它强化了Apache Lucene的搜索能力，把掌控海量数据索引和查询的方式提升到一个新的层次。本文结合开源社区和阿里云平台的实践经验，探讨如何调优Elasticsearch的性能提高索引和查询吞吐量。一. Elasticsearch部署建议1.选择合理...

972

阅读约2分钟

2018-11-15

HBase Coprocessor的实现与应用

本文来自于中国HBase技术社区武汉站HBase MeetUp线下交流会的烽火大数据平台研发负责人叶铿(云端浪子)。 HBase Coprocessor的实现与应用PPT下载：http://hbase.group/slides/159 本次分享的内容主要分为以下五点： Coprocessor简介 Endpoint服务端实现 Endpoint客户端实现 Obs...

741

阅读约2分钟

2018-11-15

HBase实操 | 如何使用HBase存储文本文件

1.文档编写目的 Fayson在前面的文章中介绍了《如何在CDH中使用Solr对HDFS中的JSON数据建立全文索引》和《如何使用Flume准实时建立Solr的全文索引》，假如我们有大量的文本文件，我们应该如何保存到Hadoop中，并实现文本文件的全文检索呢。为了介绍如何对文本文件进行全文检索，本文会先介绍如何使用HBase保存文本文件。虽然HDFS中也可以...

820

阅读约2分钟

2018-11-15

HBase实操 | 如何使用HBase存储图片

1.文档编写目的 Fayson在前面的文章中介绍了《如何使用HBase存储文本文件》和《如何使用Lily HBase Indexer对HBase中的数据在Solr中建立索引》，实现了文本文件保存到HBase中，并基于Solr实现了文本文件的全文检索。如果我们碰到的是图片文件呢，该如何保存或存储呢。本文主要描述如何将图片文件转成sequence file，然后...

862

阅读约2分钟

2018-11-15

HBase原理 | 如何确保多步操作的事务性？HBase基础框架级特性Procedure解读

标题中提及"事务"可能会给大家带来误解，这篇文章不是在讨论HBase如何支持分布式事务能力的，而是介绍HBase用来处理内部事务操作的特性，这个特性被称之为Procedure V2，也是2.0版本的主打特性之一。本文内容基于HBase 2.1版本，整体内容组织结构为： 1. Procedure特性的设计初衷。 2. Procedure的完整生命周期。 3....

787

阅读约2分钟

2018-11-15

HBase实操 | 使用Java调用HBase的Endpoint Coprocessor

1.文档编写目的 HBase是一款基于Hadoop的Key-Value数据库，提供了对HDFS上数据的高效随机读写服务，填补了Hadoop MapReduce批处理的缺陷，但HBase作为列簇数据库无法轻易的建立“二级索引”、难以执行求和、计数、排序等操作。在HBase0.96版本后引入了协处理器(Coprocessor)，用户可以编写运行在HBase Se...

561

阅读约2分钟

2018-11-15

HBase实操 | 开发部署HBase Endpoint类型的Coprocessor

1.文档编写目的在前面的文章介绍了HBase自带的Coprocessor调用示例《如何使用Java调用HBase的 Endpoint Coprocessor》，本篇文章主要介绍如何开发一个HBase Endpoint类型的协处理器。本篇文章示例协处理器主要实现了对列的Count、Max、Min、Sum以及Average。前面的文章调用Coprocesso...

792

阅读约2分钟

2018-11-15

HBase实操 | 使用Phoenix在CDH的HBase创建二级索引

1.文档编写目的对于HBase而言，如果想精确地定位到某行记录，唯一的办法是通过rowkey来查询。如果不通过rowkey来查找数据，就必须逐行地比较每一列的值，即全表扫瞄。对于较大的表，全表扫描的代价是不可接受的。但是，很多情况下，需要从多个角度查询数据。例如，在定位某个人的时候，可以通过姓名、身份证号、学籍号等不同的角度来查询，要想把这么多角度的数据...

821

阅读约2分钟

2018-11-15

使用ApacheDS对Presto用户进行认证

Presto可以对接LDAP，实现用户密码认证。只需要Coordinator节点对接LDAP即可。主要步骤如下：配置ApacheDS，启用LDAPS 在ApacheDS中创建用户信息配置Presto Coordinator，重启生效验证配置下面详细介绍相关步骤。启用LDAPs 创建ApacheDS服务端使用的keystore, 此处密码全部使用'1...

925

阅读约2分钟

2018-11-15

基于DKHadoop的智慧人社服务平台开发案例简述

大数据技术的应用与发展正在让我们的生活经历一场深刻的“变革”，而且这种变革几乎让所有人都感觉非常舒服，自然而然的就完成了这样的一个变化。最根本的原因其实是大数据技术的应用真正帮助我们解决了问题。我想也正是基于大数据技术的超强实用性吧，它才会被上升到国家战略层面的高度得以出现在政府工作报告中。大数据技术的应用于，对于建设智慧政务平台的可谓功不可没。智慧政务云...

651

阅读约3分钟

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

文章列表

互联网分布式微服务云平台规划分析--系统管理平台

史上最全Redis高可用技术解决方案大全

从架构到平台， POWER 9处理器最全解读

NLP-Progress记录NLP最新数据集、论文和代码: 助你紧跟NLP前沿

pyhanlp 停用词与用户自定义词典功能详解

双11奇迹背后的大数据平台，不喧哗，自有声！

开源大数据周刊-第107期

阿里云数据库10月刊：阿里云数据库获国际顶级研究机构认可服务中国十亿用户领跑数据时代

入选首个Forrester云数仓研究报告，“后起之秀”DataWorks有何魔力？

阿里云Elasticsearch性能优化实践

HBase Coprocessor的实现与应用

HBase实操 | 如何使用HBase存储文本文件

Spark 通过 spark-submit 设置日志级别

HBase实操 | 如何使用HBase存储图片

HBase原理 | 如何确保多步操作的事务性？HBase基础框架级特性Procedure解读

HBase实操 | 使用Java调用HBase的Endpoint Coprocessor

HBase实操 | 开发部署HBase Endpoint类型的Coprocessor

HBase实操 | 使用Phoenix在CDH的HBase创建二级索引

使用ApacheDS对Presto用户进行认证

基于DKHadoop的智慧人社服务平台开发案例简述

资源下载

腾讯云软件源

Rocky Linux

Sublime Text

WebStorm

欢迎您来访！

文章列表

互联网分布式微服务云平台规划分析--系统管理平台

史上最全Redis高可用技术解决方案大全

从架构到平台， POWER 9处理器最全解读

NLP-Progress记录NLP最新数据集、论文和代码: 助你紧跟NLP前沿

pyhanlp 停用词与用户自定义词典功能详解

双11奇迹背后的大数据平台，不喧哗，自有声！

开源大数据周刊-第107期

阿里云数据库10月刊：阿里云数据库获国际顶级研究机构认可 服务中国十亿用户 领跑数据时代

入选首个Forrester云数仓研究报告，“后起之秀”DataWorks有何魔力？

阿里云Elasticsearch性能优化实践

HBase Coprocessor的实现与应用

HBase实操 | 如何使用HBase存储文本文件

Spark 通过 spark-submit 设置日志级别

HBase实操 | 如何使用HBase存储图片

HBase原理 | 如何确保多步操作的事务性？HBase基础框架级特性Procedure解读

HBase实操 | 使用Java调用HBase的Endpoint Coprocessor

HBase实操 | 开发部署HBase Endpoint类型的Coprocessor

HBase实操 | 使用Phoenix在CDH的HBase创建二级索引

使用ApacheDS对Presto用户进行认证

基于DKHadoop的智慧人社服务平台开发案例简述

资源下载

腾讯云软件源

Rocky Linux

Sublime Text

WebStorm

欢迎您来访！

阿里云数据库10月刊：阿里云数据库获国际顶级研究机构认可服务中国十亿用户领跑数据时代