首页 文章 精选 留言 我的

精选列表

搜索[动态代码分析],共10000篇文章
优秀的个人博客,低调大师

如何使用X-Pack Spark的YarnUI、SparkUI、Spark日志、任务运行状况的分析

概述 X-Pack Spark目前是通过Yarn管理资源,在提交Spark 任务后我们经常需要知道任务的运行状况,例如在哪里看日志、怎么查看每个Executor的运行状态、每个task的运行状态,性能瓶颈点在哪里等信息。本文主要介绍如何使用X-Pack Spark的Yarn UI 和Spark Job UI来获取上述的信息。 Yarn UI的介绍 Yarn UI入口 X-Pack Yarn UI入口有两个。 1、从X-Pack Spark集群明细界面入口。如下图,点击“YARN”,进入Yarn UI。 注意:请先阅读“UI访问说明” 2、从“作业管理”中每个作业的运行结果状态显示栏入口。如下图: 注意:请先阅读上图的“UI访问说明” Yarn UI功能介绍 进入YarnUI后可以看到如下的界面:界面主要分三个区域。区域1:导航栏;区域2:集群的统计信

优秀的个人博客,低调大师

最新市场分析,蓝牙正在成为IoT行业一股重要推动力

【大咖・来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 早在数年前,各大市场研究机构都对物联网的潜力做出了乐观的预测,未来物联网的连接数量将会达到数百亿的级别,远远超过手机的连接数量,事实上从目前的物联网发展结果来看,也正在逐渐的实现这一愿景。当然,物联网连接数量有多种多样,而蓝牙将会在其中扮演着重要的角色。 蓝牙技术的演进方向更加的物联网化 蓝牙作为一项已经应用了数十年的“老”技术,其应用范围与市场认可度在日益提升,这与其长期的不断演进技术演进密不可分的。尤其是最近几个重要的演进版本中,蓝牙技术更加的“IoT化”,比如说: BLE则解决了蓝牙功耗过大的问题,功耗的大小这在IoT设备中是一个非常核心的指标,因为低功耗不仅可以增加用户的产品体验,尤其是对于电池供电的设备来说,在降低成本方面也有很积极的意义。BLE的出现让各种各样的智能家居与可穿戴设备开始采用蓝牙技术传输。 Mesh则解决了网络覆盖问题,因为在区域性质的场景中,选择采用独立AP或者网关进行网络覆盖的成本会很高,而采用Mesh技术则可以很低成本解决某个区域应用场景中多个设备的组网问题。 高精度定位开启了更大的应用市场,位置数据作为一个基础的数据维度在未来具有广泛的应用前景,未来有超过三分之二的IoT设备都将采集位置数据,而在定位方面,精度是最为核心的一个指标。在蓝牙***的5.1版本中,增加了AOA定位技术,相比于传统的RSSI定位,精度从米级提升到了厘米级。 蓝牙军团的力量逐渐扩大 蓝牙技术之所以能一直不断发展,与蓝牙技术联盟(SIG)的推动也密不可分,SIG在蓝牙标准的制定与技术版本的演进、社区的建设与市场品牌方面的推广都有很大的促进作用。2019年5月23日,蓝牙亚洲大会(Bluetooth Asia 2019)在深圳举行,在大会上,展示了蓝牙的***发展成果,尤其是当前的蓝牙军团力量逐渐扩大。 来源:蓝牙技术联盟 可以看到,在2018年,蓝牙技术联盟的成员接近了3.5万家企业,在当前,市面上各类无线通信技术不断增多的情况下,蓝牙依然保持着它强有力的活力,在我们最关注的亚太地区,蓝牙技术联盟企业超过1.2万家,而其中中国的企业数量超过6000家,占亚太区的一半左右。 来源:蓝牙技术联盟 蓝牙设备的出货量也在一直稳步的上涨,2018年蓝牙设备的出货量为37亿台,而预计在2023年,这一数字将会达到54亿台。 其中低功耗蓝牙设备的数量将会日益增加,预计在2023年,有90%的蓝牙设备都将采用低功耗蓝牙,当然经典蓝牙(BR/EDR)也不会退出市场,更多的是与低功耗蓝牙双模结合使用,预计在2019年,会有27亿蓝牙设备在出厂时会同时配备BR/EDR和低功耗蓝牙。 位置服务将会成为蓝牙增长最快的应用功能 从功能上来说,音频传输、数据传输、位置服务、设备网络是蓝牙最重要的四个应用功能。下面是蓝牙技术联盟对于这几个应用领域的出货量预测。 1. 音频传输 蓝牙让耳机、扬声器和家庭娱乐设备免去了电线的烦扰,为无线音频传输带来了彻底变革。 来源:蓝牙技术联盟 2. 数据传输 从健身追踪器和医疗健康监控器到玩具和工具,每年都有数以百万计的新型低功耗蓝牙数据传输设备让消费者能够摆脱电线的烦扰。 来源:蓝牙技术联盟 3. 位置服务 蓝牙技术的新进展助力实现功能强大、低成本的室内定位和位置服务解决方案。 来源:蓝牙技术联盟 4. 设备网络 蓝牙mesh网络的推出为实现大规模设备网络铺平了道路,从而监控和自动化管理成千上万的互联设备。 可以看到,音频传输与数据传输是蓝牙技术最主要的功能,而相应的出货量也在稳定的增长,其中***的亮点当属定位应用,虽然当前整体的量不大,但是蓝牙的定位功能在今后五年的复合增长率将会达到43%。而Mesh设备联网的复合增长率也有23%。 蓝牙新兴应用领域的市场介绍 而在具体的应用领域层面,除了传统的PC与手机市场,蓝牙技术在消费级与工业级的新兴市场应用也将迎来大爆发。 智能楼宇:蓝牙技术不断创新,通过实现大规模设备网络和精确定位服务,进一步扩展了智能楼宇的定义,让楼宇整体自动化成为现实,不仅提升访客体验,提高住户生产力,并优化空间利用率。至2023年,位置服务预计将成为智能楼宇的主要应用,用于智能楼宇的蓝牙位置服务设备将增长7倍。从导航到空间利用,蓝牙技术有助于提高楼宇的运营效率,并改善住户体验。 同时,用于智能楼宇的互联照明解决方案呈增长态势。领先的制造商已发布面向照明自动化和控制系统的长期产品规划。至2023年,商业楼宇自动化和安防解决方案年出货量预计将以46%的年复合增长率实现6.5倍的增长。 在应用领域,零售和医疗保健行业也将直接受益于智能楼宇解决方案。零售商使用蓝牙技术实现个性化促销和导航服务,提供更佳购物体验,提升销量,并降低运营成本。医疗保健机构使用蓝牙技术监控患者,跟踪资产,并提升紧急服务能力,从而应对成本压力,提升护理服务水平及运营效率。 智能工业:蓝牙正在***工业和信息的融合,为工业物联网革命铺平道路,助力制造商提升效率、生产力和安全性。至2023年蓝牙工业设备的年复合增长率将达到40%。 其中,蓝牙资产跟踪和管理解决方案将日渐普及,帮助制造商和分销商优化库存管理,并提升运营效率。至2023年其商用部署将以每年47%的速度增长,占市场出货量的70%,为智能工业的发展铺平道路。 同时,智能手机和平板电脑正在逐渐取代传统的人机界面(HMI),用于状态监测和设备远程控制。企业级可穿戴设备发展潜力巨大。2019年扫描仪、耳戴设备、跟踪器等企业级可穿戴设备的出货量占智能工业设备出货量的34%,并将保持强劲增长,未来五年的年复合增长率将达到28%。 智能家居:无论是将电视与条形音箱相连,还是将个人电脑与键盘连接,蓝牙技术多年来一直是互联家居的核心。如今,蓝牙的可靠性、安全性和互通性将帮助发掘家居自动化市场的全部潜力。 家居自动化在未来五年内的年复合增长率超过21%。主流技术厂商的生态系统将主导家居自动化市场的发展。在过去一年中,像阿里巴巴和小米这样的领先公司都战略性地选择蓝牙来定义其家居自动化体验。 智能家电成为增速最快的家居自动化设备类别,在未来五年内的年复合增长率将达到59%。至2023年,智能家电的年出货量达到5.4亿,而工具、玩具、游戏系统和电视等互联家居设备的年出货量将接近9亿,100%的智能扬声器均采用蓝牙。与此同时,蓝牙住宅照明的年出货量也将增长4.5倍。 智慧城市:蓝牙连接着未来智慧城市,提升访客体验,改善市民生活质量,并打造更商业友好型的环境。至2023年,蓝牙智慧城市设备的年出货量将增长7倍,机场中蓝牙实时位置服务(RTLS) 设备部署将增长5倍,体育场馆中蓝牙实时位置服务(RTLS) 设备部署将增长3倍。 蓝牙位置服务和互联设备网络在未来五年内将为各种智能城市应用提供支持。应用于机场、体育场馆、医院、零售商场、旅游中心和博物馆中的蓝牙位置服务将改变访客与智慧城市之间的互动方式。与此同时,资产管理解决方案提高了智慧城市资源的利用率,有助于降低运营成本。 在城市交通方面,蓝牙助力实现移动出行即服务(MaaS),提供使用自行车和踏板车的按需交通解决方案。目前移动出行即服务在亚太地区已实现了大幅扩张,全球范围内也将稳步推出。 在其他领域,蓝牙持续塑造着我们与世界互动和发现世界的方式。如今几乎所有新的智能手机、平板电脑和笔记本电脑都采用了蓝牙。蓝牙是无线音频的代名词,让耳机、扬声器和娱乐设备摆脱了电线的束缚,使消费者无需电线即可拥有音乐和娱乐体验。至2023年,蓝牙耳麦和耳机年出货量将超过7.2亿,仍为***的音频和娱乐设备类别,同时全球过半以上的新电视会将蓝牙作为标配。蓝牙遥控器的出货量也将在未来五年翻一番。 作为汽车市场的中流砥柱,蓝牙在汽车和驾驶员之间建立了连接,不仅实现了道路安全水平的新高,同时还提升了车载体验。蓝牙成为几乎所有新车的标配。至2023年,54%上路行驶的车辆将配备蓝牙。蓝牙推动汽车实现无钥匙开锁。虽然信息娱乐系统将持续占据蓝牙汽车出货量的大部分,但至2023年,密钥卡、传感器和其他车载应用将占全部出货量的24%。 在物联网这个大市场中,未来会涌现更多的应用,催生更多的技术出现,而蓝牙,将会是其中重要的贡献的贡献力量,未来,蓝牙针对IoT市场会有哪些新的演进,我们拭目以待!

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册