HA3、iGraph和DII服务框架统一之战

2018-03-28 636

我们在多年的HA3开发工作当中，形成了一套高效的数据存储和管理方案，将其推广到其它业务场景（包括iGraph、DII服务的场景）后也取得了不错的效果。这篇文章首先介绍在典型的搜索场景，我们的在线数据存储和管理框架是如何发挥作用的，然后描述将这个框架推广到更多的业务场景的过程以及取得的收益。

1 搜索场景的特点

一般的搜索场景满足以下几个特点：

数据量大。doc数目达到几个Billion，总索引存储空间量超过几十TB是常见的事情。
* 访问量大。一个大型的搜索业务日pv上数十亿是很正常的压力。

* 数据更新量大。以主搜双11为例，excellent集群每秒的正排更新qps可达几十万每秒，如此大的更新量给在线服务引擎带来了很大的压力。
* 数据更新的时效性很高，需要到秒级以内。例如主搜场景，对某个宝贝的大量的用户点击行为应该能够

微信关注我们

原文链接：https://yq.aliyun.com/articles/573172

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

SinoBBD强化银行IT支撑全力推动信息化银行建设再上新台阶

5月24日，北京供销大数据集团（以下简称“SinoBBD”）出席由《金融科技时代》杂志社主办的贵州省银行业网络与信息安全联席会暨第九届贵州地区银行系统 IT 技术交流会。本次大会以“银行业网络与信息安全”为主题，聚集了SinoBBD等一批行业领先企业，共同探讨大数据时代下，如何就大数据中心与灾备体系建设解决银行系统难题进行深入沟通。图为第九届贵州地区银行系统IT技术交流会会议现场北京供销大数据集团DC事业部产品售前部总经理孙岩表示，集团作为大数据“国家队”，是一家以数据中心为基础产品，全力打造数据中心集群生态圈的IT公司，为社会各企业提供数据中心服务、网络服务、云服务、大数据服务及各行业垂直解决方案。为此，北京供销大数据集团制定了“3+10+X”战略，致力于打造国内最大规模的第三方公立大数据中心集群，提供从云端计算服务、大数据应用，到业务连续性保障的全面服务。进入“互联网+”时代，整个的银行业面对的挑战还是很复杂的，尤其对一些规模较小的银行，既要开拓新业务，还需要提供强有力的IT支撑。尤其是IT保障方面，无论体量大小，都需要面对监管机构IT的严格的监管要求，比如对平台的安全性、架...

2018-03-29

505

华住酒店集团有6万多名员工，8000万位活跃会员，3000多家门店，合作的精选酒店也达500余家，显然，这些数据还在继续增长。任何一个店客的投诉，30分钟必须响应妥办。客人退房后的0秒，楼层服务员收到打扫任务信息，自主安排作业。房态保持实时更新，净房信息0秒同步给客人以便于自助选房，支持在满房状态下的选房；客房出租率保持85%左右，有些门店甚至要在110%以上；支持包括积分、优惠券、第三方支付、银行卡等在内的混合支付；几分钟内需要完成调价手续；要取消酒店里的对讲机、客房的电话机；官方渠道订房率约90%；系统是完全中央化的，所有门店及分支机构都没有本地的应用与数据存储。十几个互相耦合的子系统协同工作；支持从“住宿”到“住宿+X”的升级。 …… 要实现以上集成技术及系统功能，他们是如何做基础设施选型的？华住酒店集团CIO又是如何带领300号人的团队和业务线特别是一线进行协同创新的？前不久，牛透社主笔如约拜访了华住酒店集团CIO刘欣欣女士。主笔第一次和她见面是在2016年9月份，崔牛会在苏州主办全国CIO论坛的时候，她当时做了主旨演讲，是关于如何带领团队支撑“胖线上，快线...

2018-03-29

614

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

HA3、iGraph和DII服务框架统一之战