A16Z 750万美元投资分布式文件系统 Tachyon-低调大师

A16Z 750万美元投资分布式文件系统 Tachyon

2017-06-01 559 89

据 WSJ消息，Tachyon日前获得了硅谷风投 A16Z 750 万美元 A 轮投资。A16Z 的普通合伙人 Peter Levine 加入 Tachyon 董事会。

根据该项目官网的介绍，Tachyon 是一个以内存为中心的分布式文件系统，能够为集群框架（如 Spark、MapReduce）提供可靠的内存级速度的文件共享服务，具有类 Java 的文件 API、兼容 Hadoop MapReduce 和 Spark、底层文件系统可插拔等特性。

Tachyon 最初出现是为了解决如下问题：

大数据分析流水线中数据共享通过基于磁盘文件系统（HDFS等）性能比较缓慢；
大数据计算引擎的处理进程（Spark的Executor，MapReduce的Child JVM等）崩溃出错后，缓存的数据也会全部丢失；
基于内存的系统存储数据冗余，对象太多会导致Java GC时间过长。

Tachyon 整体架构如下图所示（移步了解 Tachyon），

https://yqfile.alicdn.com/95fcdb8c77648e3033299cb5f6f9cf39aed7a101.png" >

据悉，Tachyon 项目在 2012 年底对外发布，孵化自 UCLA Berkeley 的AMP实验室，由计算机在读博士李浩源创立，Tachyon 同样是李浩源的博士攻读方向。在接受InfoQ采访时李浩源表示，

长期来讲，我们会像 Apache Mesos 以及 Apache Spark 一样，进入 Apache Software Foundation。这里欢迎更多的开发者加入。

目前，这个开源项目已经吸引了超过 30 家公司的 70 多名贡献者。包括雅虎、红帽、Intel 还有 EMC，而 EMC 已经在其闪存产品 DSSD、Isilon 中尝试集成 Tachyon。创始人李浩源表示，Tachyon 的商业软件正在开发中，没有确切发布的时间。

值得注意的是，A16Z 还投资了大数据初创公司Adatao、Mesosphere、Databricks等，对新兴的大数据领域、数据分析软件看好。这几家公司和 Tachyon 一样，均与 AMP 实验室有联系。
文章转载自开源中国社区 [http://www.oschina.net]

微信关注我们

原文链接：https://yq.aliyun.com/articles/110725

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

漏洞预警：Hadoop 未授权访问可导致数据泄露

近日，国外媒体报道全球Hadoop服务器因配置不安全导致海量数据泄露，涉及使用Hadoop分布式文件系统（HDFS）的近4500台服务器，数据量高达5120 TB （5.12 PB），经分析，这批数据泄露的近4500台HDFS服务器中以美国和中国为主。事件原因：互联网上暴露的Hadoop服务器如果没有配置访问认证均可能受影响，攻击者针对HDFS的攻击删除了大多数目录，并会添加一个名为“NODATA 4U_SECUREYOURSHIT”的新目录和“PLEASE_README”的目录，攻击者可能备份业务数据后在服务器上删除这部分数据，然后直接发送勒索邮件并索要勒索赎金。风险等级：高危漏洞原因：该问题产生是由于管理员在配置失误所致，由于直接在云上开放了Hadoop机器HDFS的50070web端口及部分默认服务端口，黑客可以通过命令行操作多个目录下的数据，如进行删除操作，安全风险高。检测方式: 手工检查Hadoop 50070/50075端口是否开放到了公网，例如:http://ip:50070或http://ip:50075 修复措施：强烈建议您安装完Hadoop集群后，进行...

850

DB-Engines 数据显示开源数据库越来越受欢迎

如果我们将 DB-Engines 的排名分为开源和商业数据库系统的话，商业的系统依赖占据 59% 的市场份额，而在去年这个数字是 64%。基于我们对数据库管理系统的各种排名和统计，我们分析开源工具和商业系统的受欢迎程度。这些开源的数据库背后都有很强的公司在提供支持，例如 MySQL -> Oracle；MongoDB -> MongoDB Inc；Cassandra -> DataStax 等。这些公司在为这些系统提供额外的服务和增强的工具包。此外很多商业数据库系统也提供免费的版本，尽管这些免费版本在使用上有一些限制。截至2014年5月的现状: 上面的饼图显示 59% 的系统是商业系统，因为有全球首屈一指的公司在给这些系统提供支持和服务，包括： Oracle, Microsoft SQL Server, DB2, Microsoft Access, Sybase ASE 开源数据库系统趋势: 下面的图表现实开源系统非常清晰的发展趋势，在16个月内增长 5%。有两方面的因素导致的这个增长趋势：开源数据库系统本身的快速增长，如 PostgreSQL, MongoD...

574

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。