首页 文章 精选 留言 我的

精选列表

搜索[AI工作流],共10000篇文章
优秀的个人博客,低调大师

Spark 概念学习系列之Spark计算工作流(十二)

下图 中描述了 Spark 的输入、运行转换、输出。 在运行转换中通过算子对 RDD进行转换。 算子是 RDD 中定义的函数,可以对 RDD 中的数据进行转换和操作。 输入:在 Spark 程序运行中,数据从外部数据空间(例如, HDFS、 Scala 集合或数据)输入到 Spark,数据就进入了 Spark 运行时数据空间,会转化为 Spark 中的数据块,通过 BlockManager 进行管理。运行:在 Spark 数据输入形成 RDD 后,便可以通过变换算子 f liter 等,对数据操作并将 RDD 转化为新的 RDD,通过行动(Action)算子,触发 Spark 提交作业。如果数据需要复用,可以通过 Cache 算子,将数据缓存到内存。 输出:程序运行结束数据会输出 Spark 运行时空间,存储到分布式存储中(如saveAsTextFile 输出到 HDFS)或 Scala 数据或集合中( collect 输出到 Scala 集合,count 返回 Scala Int 型数据)。 图 1 Spark 算子和数据空间 Spark的核心数据模型是RDD,但RDD是个抽象类,具体由各子类实现,如MappedRDD、Shuff ledRDD等子类。Spark将常用的大数据操作都转化成为RDD 的子类。 本文转自大数据躺过的坑博客园博客,原文链接:http://www.cnblogs.com/zlslch/p/5724027.html,如需转载请自行联系原作者

优秀的个人博客,低调大师

为“中国式审批”而生:Oinone 工作流审批重磅发布

20251118 升级内容 镜像版本升级:6.3.4.1-->6.3.5 后端版本升级:6.3.4.1-->6.3.5 前端版本升级 新增监控中心-流程实例查看文档 新增流程干预能力:审批同意、审批拒绝、修改处理人、流程暂停、节点暂停、重新发起、强制结束、流程唤醒、节点唤醒、填写提交 新增流程概览、流程监控 新增反悔 点击Demo 体验 演示环境 相关视频 ⚡ 直达演示环境 ☕ 账号:admin ☕ 密码:admin 🎬 1. [数式Oinone] #产品化演示# 后端研发与无代码辅助 🎬 2. [数式Oinone] #产品化演示# 前端开发 🎬 3. [数式Oinone] #个性化二开# 后端逻辑 🎬 4. [数式Oinone] #个性化二开# 前端交互 🎬 5. [数式Oinone] #个性化二开# 无代码模式

优秀的个人博客,低调大师

.Net 权限工作流框架 OpenAuth.Net vue 版本正式开源

根据 OpenAuth.Net 官网更新日志显示,OpenAuth.Net 8.3 发布,其中多项重大更新: ✅全面开源 vue2 版本源码及文档,免费使用。 ✅放弃原有 mvc 版本。 ✅提供 UniApp 版本。 ✅更快更新优化 vue3 版本。 目前市面上快速开发、权限管理方面优秀的.NET 开源项目很多,但我给 OpenAuth.Net 定了以下几条规则: 不强制绑定 gitee、github 登录 star 后才能访问演示站点、文档等。 更新快,基本每周都有更新,有问题及时修复。 文档永不收费,所有人可见。 开源版本代码不做任何限制,任何人都可以免费学习使用。 💯就是说,要就要真开源! 🤔扯了这么多,OpenAuth.Net 到底值不值得入坑呢? 支持最新版.Net 9.0 同时支持 EntityFramework、SqlSugar 两款最流行的 ORM 框架 内置代码生成器,可快速生成带有头 / 明细结构的页面,请参考:代码生成 超强的自定义权限控制功能,请参考:通用权限设计与实现 完整 API 鉴权,可以控制角色可访问的 API 资源,及模块功能字段可见及是否返回,请参考:按角色授权 API 资源及字段权限 可拖拽的表单设计。详情:可拖拽表单 可视化流程设计。可视化流程设计 全网最好用的打印解决方案。详情:智能打印 基于 Quartz.Net 的定时任务控制,可随时启 / 停,可视化配置 Cron 表达式功能,请参考:定时任务 支持 sqlserver、mysql、Oracle、PostgreSql 数据库,理论上支持所有数据库 支持同时访问多数据源 支持多租户 支持搭建自己的 IdentityServer 服务器,实现基于 OAuth2 的登录体系,请参考:登录认证及 OAuth 集成 最后放两张靓图养养眼:

资源下载

更多资源
腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册