DCOS实践分享(4):如何基于DC/OS整合SMACK(Spark, Mesos, Akka, Cassandra, Kafka)
这篇文章入选CSDN极客头条 http://geek.csdn.net/news/detail/71572 当前,要保证业务的市场竞争力,仅靠设计一个可用并且好看的产品,已经完全不能满足要求。全球消费者都希望产品能够足够的智能化,通过大数据分析来改善他们的用户体验。简言之,物联网和大数据终将成为改变生活的技术驱动力。 近几年涌现了大量的技术架构与设计模式,开发者和科学家可以利用它们为大数据和物联网开发实时的数据分析工作流应用。其中批处理架构,流式处理架构,lambda架构,Kappa架构,都是其中的代表。所有这些架构,都需要一个易扩展的大数据处理平台作为基础。于是2014年底,一组可相互兼容,互相协作的开源组件被整合起来作为这个基础平台。SMACK应运而生。 SMACK包括Spark, Mesos, Akka, Cassandra, 以及Kafka,功能如下: 包含广泛应用于大数据数据处理场景的轻量级工具包 包含被健壮测试并广泛应用的开源软件,有强大的社区支持 可保证低延时下的可伸缩性和数据备份。 统一的集群管理平台来管理多样的,不同负载的应用。 在部署具体的应用的时候,大数据平台往往...





