为什么谈硬件,必言软件
云栖号资讯:【点击查看更多行业资讯】
在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来!
数据即价值。
但是,仅仅拥有可用的数据并不意味着可以充分利用数据价值。
企业要思考一个关键问题:我们如何发掘数据中蕴藏的却又难以触及的潜力,不断推进目标并增加营收?
为了寻求答案,越来越多的企业诉诸于开源解决方案。
企业正在评估并完善开放式架构,从而将计算、网络和存储资源整合在一起。可扩展的硬件基础架构支持软件的不断集成和开发。
与神秘的封闭架构不同,开源软件以及越来越多的硬件提供更好的可视性和控制性,从而打破协作障碍,使科技产业更为民主化。
2018年IDC TechScape研究发现:“大多数重要的新兴技术都是部分或全部由开源组件构成,这为行业未来的走向指明了方向。”
开源架构优势明显:
1、开源意味着相关代码可以得到业内同行共同审查,一起改进。
2、开源将研发成本分散开来,企业共同分担解决问题的费用。
3、在开放环境中,安全性也得到强化。由于更多人查看代码,bug也更容易被发现。
以希捷为例,它属于硬件阵营。但是,由于创新同样来源于开源世界,他们努力突破硬件厂商的局限,在软件领域不断创新,力图在软件方面有所作为。
譬如相应地优化软硬件系统,改善对象存储。那么,硬件公司在软件领域能做什么?
软件中的任何更新都会在硬件中体现出来,反之亦然。
硬件和软件互为阴阳,任何一方都需要不断创新以跟上另外一方的要求。数据的流动需要软件和硬件协同来实现。硬件设计的经验为软件层的数据处理提供洞见。同时从软件世界中汲取的经验教训也有助于硬件的设计优化。
开源架构与数据存储解决方案正在共同致力于如下问题:多云、数据流、数据访问、数据可视性以及安全性。
多云
随着企业从公有云转向多云,企业期望混合云能兼具公有云的便捷灵活,以及私有云的自主可控。
开源项目包括Apache Hadoop和Ceph,支持存储的横向扩展,帮企业通过扩展计算与存储搭建更强大的私有云,实现多云部署。
硬件如何发挥作用?针对工作负载优化的硬件集群以模块化部署,辅助以横向扩展的软件生态系统,将帮助企业搭建私有云。
如果系统需要低延迟,则全闪存阵列SSD是适当的解决方案;如果私有云需要海量存储,则硬件架构需要容纳独立的构建模块。
数据流
由于边缘、物联网和其他技术的兴起,数据正在从边缘到核心爆发。到2025年,数据圈将达到175ZB。
在哪里以及如何存储和处理所有这些数据?开源软件提供了构建模块,基础架构设计师能够开发针对不同应用进行优化的解决方案。
例如,开源流处理平台Kafka;构建在Hadoop上的数据仓库框架Hive;以及将数据存储在操作系统数据库的解决方案Redis,等等。
这对硬件意味着什么?哪些构建模块组合在一起去获取所需的数据?用什么速度去获取?使用什么工具进行数据分析?所有这些都关系到如何配置计算和存储组件。
为促进云基础架构的有机增长,可随时组合和拆分的架构将更能发挥资源的效率。
数据访问
由于数据需求指数级增长,数据访问更为重要。硬盘容量的增加将满足于存储密度的需求,数据的读写速度也要提升,而整体成本也要进一步下降。
硬件有什么作用?研究人员不断革新NAND技术,在保持同等水平延迟和带宽的同时,降低成本。
双磁臂等技术正在为大容量设备提供更高的IOPS性能。这为架构师们提供了更多的选择,使他们能够配置满足各种应用需求的系统。
数据的可视性
软硬件集成的另一方面是对系统信息的可视性需求。软件的大趋势是自动编排并自动管理多云基础架构。Kubernetes容器编排生态系统与Prometheus等成熟的开源工具相结合,即可创新架构的自主管理。
硬件世界的数据可视性如何保证?温度和振动等因素的可视性对硬件的优化十分重要。通过硬件与固件层面的创新,相应的人工智能工具得以应用,获取更清晰的遥测数据与监测指标。
企业设备可以开放公开日志,提供更多详细信息。
数据安全
按照《通用数据保护条例》(GDPR)等法规规定,数据的溯源、移动、计算和存储的需求不断增长。开源解决方案更流行,这是因为开放源代码增加了可信度。
这在硬件上如何体现? RISC-V架构是一个开源的电子指令集,专注于低成本、低功耗和高安全性,帮助企业通过共享模式更快地设计、开发电子产品芯片。
无论挑战涉及安全性、可视性、数据访问、数据流还是多云,硬件都必须关注软件世界。因为一旦涉及到数据,硬件和软件注定要相互成就,相伴相生。
【云栖号在线课堂】每天都有产品技术专家分享!
课程地址:https://yqh.aliyun.com/live立即加入社群,与专家面对面,及时了解课程最新动态!
【云栖号在线课堂 社群】https://c.tb.cn/F3.Z8gvnK
原文发布时间:2020-05-30
本文作者:读芯术
本文来自:“雷锋网”,了解相关信息可以关注“雷锋网”
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
OSS数据湖实践——parquet格式
数据组织形式、存储格式及Parquet格式介绍 在介绍parquet数据格式之前,我们先介绍数据的几种组织形式以及存储形式。 结构化、半结构化、非结构化数据 结构化数据 结构化数据源对数据定义了一种模式。通过这些关于底层数据的额外信息,结构化数据源提供高效的存储和性能。例如,列式数据存储Parquet和ORC,使得从一个列子集中提取数据更加容易。当数据查询只需要获取一少部分列的数据时,通过遍历每行数据的方式需要查询出过多的数据。基于行的存储格式,如Avro通过高效的序列化存储数据提供了存储优势。但是,这种优势是以复杂性为代价的。例如,由于结构不够灵活,模式转换将成为挑战。 半结构化数据 半结构化数据源是每行记录一个结构,但不需要对整体记录有一个全局的模式定义。因此,每行记录是通过其自身的模式信息对其进行扩充。JSON和XML就是其中最流行的例子。半结构化数据的优势在于通过每行记录自身的描述信息,增强了展示数据信息的灵活性。由于有很多轻量级的解析器用于处理这些记录,因此半结构化数据格式在很多应用中普遍被使用,并且在可读性上存在优势。但是,它的主要缺陷也在于会产生额外的解析开销,不能专门应...
- 下一篇
小心这 10 个云计算错误!
乐观主义者们总爱说:“乌云总是镶着金边的”,但他们没有说的是,在乌云下常有狂风、暴雨、闪电,偶尔还有高尔夫球般大小的冰雹。 云计算也是如此。从好的方面来说,它为我们提供了各种各样的好处,包括增强可靠性、灵活性、可管理性和可扩展性。然而,再往下看,你就会看到乌云的黑暗面,每一个小小的错误、疏忽或误判都可能导致一场毁灭性的灾难。 要想保证云过渡为企业带来好处,而不是亏损和诉讼,那么就请避免以下10个常见错误。 在没有管理和计划策略的情况下迁移到云 在云中配置基础架构资源非常简单,而且可能会忽视容易引发安全性和成本问题的疏忽。在此处,进行管理和规划就显得尤为重要。 技术咨询公司SPR Consulting的云基础架构主管克里斯•汉森(Chris Hansen)表示,虽然实现管理和计划是最终的目标,但不需要一步到位。汉森表示:“可以使用自动化支持的小迭代。这样,你就可以监视管理、安全和财务这三个关键领域,在短时间内发现问题并对其进行纠正。” 这里相关的错误是:不了解组织中由谁负责特定的云相关任务(例如安全性、数据备份和业务连续性)。 安全自动化平台供应商SourceClear的首席安全官罗伯特...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- MySQL8.0.19开启GTID主从同步CentOS8
- Hadoop3单机部署,实现最简伪集群
- CentOS8编译安装MySQL8.0.19
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- Eclipse初始化配置,告别卡顿、闪退、编译时间过长
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池