首页 文章 精选 留言 我的
优秀的个人博客,低调大师

微信关注我们

原文链接:https://www.oschina.net/news/361412

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

OPPO 大数据混合云之路

为应对持续增长的存算能力的需求,OPPO大数据采用混合云的技术路线。 自建IDC 如大陆一样固定,但是大数据算力需求,有着明显的潮汐模式;云计算的模式犹如海上方舟,任凭潮涨潮落,仍然能从容应对。OPPO大数据就是结合了两者的各自优势,坚若磐石,伸缩自如。 将庞大且复杂的大数据架构改造成在混合云底座之间指哪打哪,极致弹性,远非简单的“迁移”问题。不仅面临近百万离线计算任务,还要处理不同系统和架构的依赖问题,单纯的上云不能体现混合云的优雅。 OPPO的数据平台为什么要用混合云?如何混合?需要解决哪些核心挑战?也许 OPPO大数据的混合云之路,可以给业界带来一些启发。 一、面向未来,大数据基础设施混合云化正在成为共识 过去两年,混合云在互联网、制造、金融等行业已经是常态,但真正推进到数百 PB 数据、近百万离线的大数据混合云模式,并不多见。 OPPO 是较早开始这项工程的终端企业之一。决定启动整个大数据平台公有云结合IDC模式,是因为 OPPO 意识到,随着企业的不断发展壮大,未来的数据体量、任务规模和技术演进路径,将越来越需要一种全新的基础设施来支撑。 相比传统数据中心,云提供的极致弹性资...

纯配时效服务-双Redis集群设计

一、概述 纯配时效服务作为物流下单环节中计算时效的重要组成部分,直接决定了下单的成功与否。其性能与稳定性至关重要,因为它们直接影响整个物流下单系统的运行效率及客户满意度。一个高效且稳定的纯配时效服务能够确保预计送达时间准确无误地展示给用户,从而提升客户体验和信任度。反之,若纯配时效服务出现故障或延迟,可能会导致订单处理延误,甚至影响客户的业务运营。因此,在设计和维护纯配时效服务时,必须确保其具备高可靠性和快速响应能力,以应对各种突发情况,确保物流链条的顺畅运行。 二、Redis集群模式 为了确保系统的高性能运行,我们摒弃了原先直接从数据库读取数据的模式。取而代之的是,我们将所有数据同步至Redis中,从而使得应用层能够直接从Redis中获取所需数据。这一改进不仅显著提升了数据读取速度,还有效减轻了数据库的负担,使整个系统更加稳定和高效。通过这种方式,我们能够更好地应对高并发访问,确保用户在使用过程中获得流畅的体验。此外,Redis的内存存储特性进一步提升了数据读取速度,增强了系统的响应能力。 纯配核心数据读取示意图 三、双Redis集群设计 为了满足容灾需求,应用层采用了有孚和中云信的...

相关文章

发表评论

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat

Apache Tomcat

Tomcat是Apache 软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定,而且免费,因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可,成为目前比较流行的Web 应用服务器。

Eclipse

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。幸运的是,Eclipse 附带了一个标准的插件集,包括Java开发工具(Java Development Kit,JDK)。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。