美团点评基于 Flink 的实时数仓平台实践 | 1月3号云栖号夜读

2020-01-02 871

点击订阅云栖夜读日刊，专业的技术干货，不容错过！

阿里专家原创好文

1.美团点评基于 Flink 的实时数仓平台实践

从整个实时计算角度来考虑，目前美团点评的实时计算平台的节点数已经达到了几千台，未来很可能会达到上万台，因此资源优化这件事情很快就会被提上日程。由于业务本身的流量存在高峰和低谷，对于一个实时任务来说，可能在高峰时需要很多资源，但是在低谷时并不需要那么多资源。外一方面，波峰本身也是会发生变化的，有可能随着业务的上涨使得原来分配的资源数量不够用。因此，资源自动调优有两个含义，一个是指能够适配作业的高峰流量上涨，自动适配 Max 值；另外一个含义是指使得作业能够在高峰过去之后自动适应流量减少，能够快速缩容。阅读更多》》

2.轻松搭建基于 SpringBoot + Vue 的 Web 商城应用

首先介绍下在本文出现的几个比较重要的概念：
函数计算（Function Compute）: 函数计算是一个事件驱动的服务，通过函数计算，用户无需管理服务器等运行情况，只需编写代码并上传。函数计算准备计算资源，并以弹性伸缩的方式运行用户代码，而用户只需根据实际代码运行所消耗的资源进行付费。阅读更多》》

3.瓜子二手车在 Dubbo 版本升级、多机房方案方面的思考和实践

随着瓜子业务的不断发展，系统规模在逐渐扩大，目前在瓜子的私有云上已经运行着数百个 Dubbo 应用，上千个 Dubbo 实例。瓜子各部门业务迅速发展，版本没有来得及统一，各个部门都有自己的用法。随着第二机房的建设，Dubbo 版本统一的需求变得越发迫切。几个月前，公司发生了一次与 Dubbo 相关的生产事故，成为了公司基于社区 Dubbo 2.7.3 版本升级的诱因。接下来，我会从这次线上事故开始，讲讲我们这段时间所做的 Dubbo 版本升级的历程以及我们规划的 Dubbo 后续多机房的方案。阅读更多》》

4.小蜜团队万字长文 | 讲透对话管理模型最新研究进展

在可拓展性方面，介绍了处理变化的用户意图、对话本体、系统动作空间的常用方法，主要有语义相似匹配方法、知识蒸馏方法和序列生成方法；对于标注数据稀缺问题，介绍了机器自动标注、对话结构有效挖掘和数据高效收集策略三部分内容；而针对传统DM中RL模型训练效率低下的问题，学界有尝试引入HRL、FRL等方法对动作空间进行层次划分，也有利用model-based RL对环境进行建模提高训练效率，将human-in-the-loop引入对话系统训练框架亦是当下十分活跃的研究方向。最后对阿里巴巴-达摩院-小蜜Conversational AI团队目前在DM模型化的进展做了一个比较详细的汇报介绍，希望本综述能为大家的对话管理研究提供一些启发和思考。阅读更多》》

5.Knative 驾驭篇：带你 '纵横驰骋' Knative 自动扩缩容实现

一篇干货好文，值得一读！阅读更多》》

视频课程及PPT下载

1.【云吞铺子】性能抖动剖析（一）
《云吞铺子-故障排查案例精选》重磅上线！首期我们将聚焦系统类常见问题——性能抖动，阿里云高级技术专家江冉将分享多年故障排查心得体会与经典案例实战经验。完成学习，你就是明日技术大牛！
视频地址：https://yq.aliyun.com/live/1037

2.【云吞铺子】性能抖动剖析（二）
《云吞铺子-故障排查案例精选》第2集如约而至，阿里云高级技术专家江冉将继续剖析系统性能抖动的经典案例。技术+颜值，实力强到无法FU吸，速来围观！
视频地址：https://yq.aliyun.com/live/1038

3.【云吞铺子】性能抖动剖析（三）
《云吞铺子——故障排查案例精选》第3集更新啦！本期我们继续跟随阿里云高级技术专家江冉了解系统性能抖动的经典案例。也许，你和技术大牛之间只差一期云吞铺子！
视频地址：https://yq.aliyun.com/live/1078

更多精彩直播

往期精彩回顾

达摩院2020十大科技趋势发布：科技浪潮新十年序幕开启 | 1月2号云栖号夜读(https://yq.aliyun.com/articles/741445 )

更多干货内容请关注阿里云云栖号公众号！
![C5AD0950_C5CE_4EAE_BE76_909C90E0DA75]

微信关注我们

原文链接：https://yq.aliyun.com/articles/741624

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

你的云还是手动挡的吗？云计算和基础设施自动化不可或缺的五大工具

云栖号：https://www.aliyun.com/#module-yedOfott8第一手的上云资讯，不同行业精选的上云企业案例库，基于众多成功案例萃取而成的最佳实践，助力您上云决策！现代 IT 和云基础架构的自动化已成为刚需。这种快速自动化进程的加速得益于市场上涌现了大量高效的 IT/云自动化工具。但是，IT 主管们选择云自动化工具前往往面临很多挑战，例如缺乏强大的计算功能，数据监视不一致，网络问题以及故障排除。解决这些关键痛点需要管理基础架构的多个方面，因此没有一种工具可以完成所有这些工作。缺少适当和必要的工具则会使IT系统停机时间大增，从而对业务产生直接负面影响。根据《PagerDuty的数字化运营现状报告》，销售部门是 IT 故障最大的 “受害者”，有 40.4％的受访者声称销售是受影响最大的非 IT 部门。这将直接影响利润。因此，在推动 IT 和云基础架构自动化的同时，技术主管们还要确保企业生产力维持最大化。这意味着技术主管们在为公司选择自动化工具时，必须关注以下方面： 1.满足要求 2.系统支持 3.故障排除 4.生产率 5.预算以下是一位有着十多年经验的软...

2020-01-03

626

云栖号：https://www.aliyun.com/#module-yedOfott8第一手的上云资讯，不同行业精选的上云企业案例库，基于众多成功案例萃取而成的最佳实践，助力您上云决策！ 1999年，凯文·阿什顿（Kevin Ashton）在目睹了零售业面临的库存、物流和供应链管理挑战之后，创造了物联网这个词。从那时起，数百万全球企业开始采用物联网，并正在揭示其巨大的经济影响。然而，尽管大多数零售商认为物联网解决方案有价值，但这些企业在很大程度上不确定这项技术如何使其受益。当被问及行业采用情况和物联网解决的关键问题时，领先的回答是提高库存准确性——但是只有24%的组织认同这一说法。如今，近乎一半的零售组织已经采用了某种形式的物联网，并且超过四分之三的零售商认为物联网将对整个行业产生变革性影响。这是因为当前使用物联网的公司中有80％以上表示效率有所提高，而70％以上的高管表示该公司的盈利能力有所提高。以下是物联网已经对行业产生影响的三种方式：更有意义的顾客体验近年来，技术已帮助零售企业利用数据和新功能来定制顾客体验。物联网通过提供给购物者更真实、更个性化的体验，进一步推动了这...

2020-01-03

570

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。