A16Z 750万美元投资分布式文件系统 Tachyon-低调大师

A16Z 750万美元投资分布式文件系统 Tachyon

2017-06-01 691

据 WSJ消息，Tachyon日前获得了硅谷风投 A16Z 750 万美元 A 轮投资。A16Z 的普通合伙人 Peter Levine 加入 Tachyon 董事会。

根据该项目官网的介绍，Tachyon 是一个以内存为中心的分布式文件系统，能够为集群框架（如 Spark、MapReduce）提供可靠的内存级速度的文件共享服务，具有类 Java 的文件 API、兼容 Hadoop MapReduce 和 Spark、底层文件系统可插拔等特性。

Tachyon 最初出现是为了解决如下问题：

大数据分析流水线中数据共享通过基于磁盘文件系统（HDFS等）性能比较缓慢；
大数据计算引擎的处理进程（Spark的Executor，MapReduce的Child JVM等）崩溃出错后，缓存的数据也会全部丢失；
基于内存的系统存储数据冗余，对象太多会导致Java GC时间过长。

Tachyon 整体架构如下图所示（移步了解 Tachyon），

https://yqfile.alicdn.com/95fcdb8c77648e3033299cb5f6f9cf39aed7a101.png" >

据悉，Tachyon 项目在 2012 年底对外发布，孵化自 UCLA Berkeley 的AMP实验室，由计算机在读博士李浩源创立，Tachyon 同样是李浩源的博士攻读方向。在接受InfoQ采访时李浩源表示，

长期来讲，我们会像 Apache Mesos 以及 Apache Spark 一样，进入 Apache Software Foundation。这里欢迎更多的开发者加入。

目前，这个开源项目已经吸引了超过 30 家公司的 70 多名贡献者。包括雅虎、红帽、Intel 还有 EMC，而 EMC 已经在其闪存产品 DSSD、Isilon 中尝试集成 Tachyon。创始人李浩源表示，Tachyon 的商业软件正在开发中，没有确切发布的时间。

值得注意的是，A16Z 还投资了大数据初创公司Adatao、Mesosphere、Databricks等，对新兴的大数据领域、数据分析软件看好。这几家公司和 Tachyon 一样，均与 AMP 实验室有联系。
文章转载自开源中国社区 [http://www.oschina.net]

微信关注我们

原文链接：https://yq.aliyun.com/articles/110725

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

漏洞预警：Hadoop 未授权访问可导致数据泄露

近日，国外媒体报道全球Hadoop服务器因配置不安全导致海量数据泄露，涉及使用Hadoop分布式文件系统（HDFS）的近4500台服务器，数据量高达5120 TB （5.12 PB），经分析，这批数据泄露的近4500台HDFS服务器中以美国和中国为主。事件原因：互联网上暴露的Hadoop服务器如果没有配置访问认证均可能受影响，攻击者针对HDFS的攻击删除了大多数目录，并会添加一个名为“NODATA 4U_SECUREYOURSHIT”的新目录和“PLEASE_README”的目录，攻击者可能备份业务数据后在服务器上删除这部分数据，然后直接发送勒索邮件并索要勒索赎金。风险等级：高危漏洞原因：该问题产生是由于管理员在配置失误所致，由于直接在云上开放了Hadoop机器HDFS的50070web端口及部分默认服务端口，黑客可以通过命令行操作多个目录下的数据，如进行删除操作，安全风险高。检测方式: 手工检查Hadoop 50070/50075端口是否开放到了公网，例如:http://ip:50070或http://ip:50075 修复措施：强烈建议您安装完Hadoop集群后，进行...

2017-06-01

978

如果我们将 DB-Engines 的排名分为开源和商业数据库系统的话，商业的系统依赖占据 59% 的市场份额，而在去年这个数字是 64%。基于我们对数据库管理系统的各种排名和统计，我们分析开源工具和商业系统的受欢迎程度。这些开源的数据库背后都有很强的公司在提供支持，例如 MySQL -> Oracle；MongoDB -> MongoDB Inc；Cassandra -> DataStax 等。这些公司在为这些系统提供额外的服务和增强的工具包。此外很多商业数据库系统也提供免费的版本，尽管这些免费版本在使用上有一些限制。截至2014年5月的现状: 上面的饼图显示 59% 的系统是商业系统，因为有全球首屈一指的公司在给这些系统提供支持和服务，包括： Oracle, Microsoft SQL Server, DB2, Microsoft Access, Sybase ASE 开源数据库系统趋势: 下面的图表现实开源系统非常清晰的发展趋势，在16个月内增长 5%。有两方面的因素导致的这个增长趋势：开源数据库系统本身的快速增长，如 PostgreSQL, MongoD...

2017-06-01

703

资源下载

更多资源

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。