首页 文章 精选 留言 我的

精选列表

搜索[问卷系统],共10000篇文章
优秀的个人博客,低调大师

Spark入门到精通视频学习资料--第二章:Spark生态系统介绍,Spark整体概述与Spark编程模型(2讲)

概述 什么是Spark ◆ Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于map reduce算法实现的分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出和结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法。其架构如下图所示: Spark的适用场景 ◆ Spark是基于内存的迭代计算框架,适用于需要多次操作特定数据集的应用场合。需要反复操作的次数越多,所需读取的数据量越大,受益越大,数据量小但是计算密集度较大的场合,受益就相对较小 ◆ 由于RDD的特性,Spark不适用那种异步细粒度更新状态的应用,例如web服务的存储或者是增量的web爬虫和索引。就是对于那种增量修改的应用模型不适合。 ◆ 总的来说Spark的适用面比较广泛且比较通用。 详细内容请参考视频: Spark概述与编程模型(上) http://pan.baidu.com/s/1kT9okBl Spark概述与编程模型(下) http://pan.baidu.com/s/16OEjc 另外给个相关的PDF文件供参考: Spark概述与编程模型.pdf http://pan.baidu.com/s/1mg64rMw ========================================================== 申明:视频资料已过期,建议不要再下载了。 ==========================================================

优秀的个人博客,低调大师

智能文档抽取系统,依靠OCR 视觉能力与大模型语义理解的融合,让机器不再仅仅识别文字,而是真正读懂合同内容

一份企业合同,看着是几页纸,背后藏着合作主体、金额、履约周期、违约责任等几十项关键信息。在很多企业里,法务、采购人员依旧要逐字翻阅、复制粘贴、手动录入台账。遇上扫描件、老合同、盖章压字、格式五花八门的协议,人工处理不仅耗时耗力,还很容易漏掉关键细节,埋下合规风险。

优秀的个人博客,低调大师

为什么量化系统需要统一股票代码格式?从数据契约到回测实盘一致性

我在搭建量化数据基础设施时,曾经把大量时间浪费在一个看起来非常简单的问题上:同一只股票,在不同数据源、不同模块里为什么总是长得不一样。后来我把股票代码统一提升为数据契约的一部分,才真正解决了行情查询、回测、策略和实盘之间的数据串接问题。本文从工程实践出发,介绍如何用统一的“代码 + 交易所后缀”格式管理跨市场标的,并结合 Python 实现完整的数据访问流程。

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称,一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集,帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册