大数据预测:2020年将带来什么
每到岁末年初,行业专家就会对未来一年的技术发展进行预测,而如今,一切始于大数据问题最关键的方面:数据本身。 不可否认,Hadoop在2019年的发展经历了艰难的一年。但是它完全消亡了吗? Alluxio公司创始人兼首席技术官Haoyuan Li为此表示,以Hadoop分布式文件系统(HDFS)形式存在的Hadoop存储已失效,但以Apache Spark形式存在的Hadoop计算仍然存在。 Haoyuan Li说:“关于Hadoop消亡的说法很多。但是Hadoop生态系统还有后起之秀。诸如Spark和Presto之类的计算框架可从数据中获取更多价值,并已被更广泛的计算生态系统所采用。Hadoop存储(HDFS)由于其复杂性和成本以及由于与HDFS保持联系,而从根本上无法弹性扩展因此导致消亡。为了获得实时见解,用户需要云中可用的即时和灵活的计算能力。HDFS中的数据将迁移到最优化和最具成本效益的系统,无论是云存储还是本地对象存储。HDFS将会消亡,但是Hadoop计算将持续存在并且越来越强大。” Cloudian公司首席营销官(CMO)Jon Toor表示,随着HDFS数据湖部署的缓慢,...