首页 文章 精选 留言 我的

精选列表

搜索[科技赋能],共10003篇文章
优秀的个人博客,低调大师

AI 赋能:大模型创新的模板生成与内容填充

作为一种新的商品表现形态,内容几乎存在于手淘用户动线全流程,例如信息流种草内容、搜索消费决策内容、详情页种草内容等。过去一年,我们通过在视频生成、图文联合生成等核心技术上的持续攻关,AIGC内容生成在手淘多个场景取得了规模化落地价值。本专题《淘宝的AIGC内容生成技术总结》是我们摸索出的一部分实践经验,我们将开启一段时间的内容AI专题连载,欢迎大家一起交流进步。 第一篇《淘宝内容AI团队2024年8篇论文总结》 第二篇《内容AI: 目标驱动的图像生成》 第三篇《OpenAI o1模型的前世今生》 第四篇《多模态人物视频驱动技术回顾与业务应用》 第五篇 《 视频级虚拟试衣技术在淘宝的产品化实践 》 第六篇 《大模型时代的内容分析Agent解决方案与业务实践》 第七篇 《淘宝全新图生视频大模型“淘宝法象”,助力商家降本增效》 第八篇 《大模型时代的视频动静态封面生产方案及业务实践》 第九篇 《MLLM在电商域互动内容生产的实践》 第十篇 《多模态自动布局技术发展及其在淘内内容场的应用》 背景 在数字时代,电子商务等领域迅速发展,用户的购买力和消费需求不断增加。然而,面对陌生或首次接触的产品,用户往往缺乏相关背景知识,难以做出选择,因此依赖导购信息。纯文字导购内容由于信息密集、核心信息不够简明,常令用户感到困惑,削弱其指导效果。而图文并茂的导购内容能够结合简洁的核心信息与相关图像,快速吸引用户注意并高效传递关键信息,成为用户决策的首选。 然而,生产符合多变内容需求的图文导购模板依然面临诸多挑战。传统方法需要设计师创建模板,前端开发人员的介入与坑位的手动标注,过程耗时且成本高。此外,固定格式模板难以灵活应对内容的动态变化,例如产品对比表格需根据不同类别调整对比属性,增加了设计复杂性。随着产品种类和功能的多样化,提高模板内容生成效率成为迫切需求。 大模型凭借其强大的识别、理解和生成能力,能够自动提取关键信息并高效生成图文导购内容,为内容生产提供智能化解决方案。这不仅简化了从设计到实现的流程,还提升了内容创作的灵活性和速度,成为优化图文导购模板生产流程的创新方案。 模板生成 传统的模板生成流程主要包含两个关键阶段:设计和转译,都需要通过完全手动的方式来实现,因此往往耗费大量时间和人力资源。为了解决这一问题,我们研发了一种模板自动生成工具,旨在充分利用人工智能大模型的强大理解和生成能力,以优化整个模板生成的流程。 图2-1展示了基于大模型的模板生成的整体流程。在这个过程中,首先从设计师处获取模板设计图和相关素材,作为参考信息输入系统。大模型会对这些参考信息进行深入分析,随后生成相应的HTML代码。接下来,通过渲染工具将生成的HTML代码转换成用户可以查看的图像形式。用户看到这些图像后,可以根据其呈现效果提出建议,通过反馈机制将这些建议传递给大模型,指导其进一步优化HTML页面。这个循环过程不仅提高了模板生成的效率,也确保了最终产品更符合用户的期望与需求。 图2-1 模板生成整体流程 该工具能够通过分析和学习设计师提供的模板,自动生成相应的HTML代码,从而显著降低模板生成所需的时间和人力成本。如图2-2,左边是设计师设计的模板,右边是大模型生成的HTML代码的渲染结果。从图中可以看出,初步生成效果已足够接近,不仅保留了设计师模板所采用的配色、格式,还对模板中展示的内容进行了优化。 图2-2 模板生成工具的初步生成结果 对于部分不够符合预期的内容,模板生成工具还支持基于自然语言的修改操作。通过反馈链路,将用户提供的修改建议优化为大模型更容易理解的表达,并提供给大模型进行模板的进一步优化。如此反复直到获得所需要的页面效果。如图2-3所示,依次对模板的配色、字体颜色、背景色等进行了修改。 图2-3 模板生成工具的反馈迭代效果 此外,大模型的高效性大幅度降低了创意尝试的成本并提升了实现的效率,缩短了用户将想法转化为现实的时间,例如图2-4所展示的多种配色的快速试验与展示。这使得用户能够更快速且灵活地试验和调整视觉呈现效果,为他们的创新提供了一个高效实践和展示的工具。 图2-4 模板生成工具的配色效果的快速尝试 内容填充 当前模板坑位的手动标注与填充的实现和团队协作成本高,且形式单一,无法动态的适配输入,如图3-1。基于大模型的 HTML 模板填充具有高效、坑位填充准确和自适应等优势。 图3-1 传统表格类模板填充 图3-2 展示了我们基于大模型的模板填充的整体流程。从上游获取 HTML 模板后,大模型首先对模板进行解析,拆解 HTML 结构和内容,例如标题、副标题、段落个数等并整理为对应的格式输出。然后将商品信息、文章等送入大模型进行解析和改写,并进行模板的填充,最后输出填充后的 HTML 文件。 图3-2 html 模板内容填充整体流程 对于传统的 HTML 模板,需要标注每一个坑位是标题、图片、正文等,这需要大量的人工成本和耗时。对于大模型而言,它可以自动识别坑位的类别并进行相应内容的填写。图3-3展示给定一个非表格类模板,以及两个充电宝的商品信息,模型首先会对提供的 HTML 模板进行分析,从给定的商品信息中提取模板填充所需要的素材(标题、副标题、段落标题和正文)等,然后进行准确的、自适应的内容填写。我们的方案不仅可以准确填写文本内容,对于图像也可以进行准确的坑位填充,包括商品图像和装饰元素,进一步提升模板的灵活性和适用性。 图3-3 非表格类模板填充 图3-4 表格类模板填充 结语 随着技术的不断进步,大模型在内容生产领域展现出前所未有的潜力和优势。通过自动化模板生成和动态内容填充,大模型不仅显著降低了人力和时间成本,还极大地提升了内容创作的灵活性和精准性。设计师和前端工程师可以更加专注于创意和质量,而无需为繁琐的转义和填充过程所困扰。同时,大模型的强大理解和生成能力,使得模板和内容能够根据不同需求自适应调整,实现“千人千面”的个性化导购体验。未来,随着大模型技术的进一步成熟和优化,我们有理由相信,它将成为内容创作的更加智能的解决方案,推动导购类内容生产向着更加高效、智能和个性化的方向发展,为用户带来更加优质和贴心的购物指导。 团队介绍 我们是淘天内容AI团队,负责运用最新的生成式AI能力,挖掘淘宝核心场景的痛点问题,通过内容生成、智能交互等方式,改善用户购物体验、降低平台&商家经营门槛。在过去的几年团队持续以技术驱动产品和商业创新,在给业务创造价值的同时,也在Agent、可控图文、视频生成,多模态统一大模型等最前沿的技术领域也有着广泛布局和深度探索,在NIPS,CVPR,ICLR等顶会发表了数十篇论文,欢迎对团队技术工作感兴趣的同学进行交流或者加入我们。 ¤ 拓展阅读 ¤ 3DXR技术| 终端技术| 音视频技术 服务端技术 | 技术质量| 数据算法 本文分享自微信公众号 - 大淘宝技术(AlibabaMTT)。 如有侵权,请联系 support@oschina.cn 删除。 本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

优秀的个人博客,低调大师

浪潮网络赋能政务云市场,助力构建便民政务

【大咖・来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 工信部日前发布的《云计算发展三年行动计划(2017-2019年)》提出,到2019年我国云计算产业规模达到4300亿元,并将积极发展工业云服务,协同推进政务云应用。近年来,我国政务云发展迅猛,全国各省市纷纷走上“政务上云”之路,这无疑将政务与IT结合的更加紧密。日新月异的政务业务创新,以及不断累加的服务内容,都在驱动政务架构的云转型,以实现政务数据集中、共享、互联的目标。 浪潮作为中国领先的云计算服务商,依托30余年服务政府、企业的实践经验,目前已实现20000+政府应用系统迁上浪潮云,取得连续三年政务云市场占有率***的傲人成绩。浪潮网络作为浪潮云战略的重要一环,一直非常重视在政务云领域的投入,在2017年初就发布了“浪潮网络政务云数据中心解决方案”,秉承为政府客户提供高效、稳定、可靠的云网络解决方案的理念,应用可***匹配政务云数据中心建设的高性能网络产品,以及全球领先的网络技术,助力政府客户构建融合、弹性、高效的利企便民服务环境。 应势而谋构建稳定高效的政务云网络解决方案 为建设信息化让政务更“惠民”,政务云数据中心不仅要支撑政府服务系统,还需满足办公部门之间信息交换、资源共享等功能,这对网络的高效性、稳定性、可靠性都提出严苛要求。浪潮网络深入分析中国政务云市场需求,通过构建高效、稳定的政务云解决方案,助力政府业务创新。 为***程度上实现从成熟硬件到先进软件的平衡, 充分保障政务系统的稳定、高效运行,浪潮网络政务云解决方案采用全球领先的网络技术和产品,通过10G-100G技术实现系统的“增量”和“提速”, 同时采用***软件融合技术实现了管理和运行工具的集成,***满足当前政务服务和应用需求。 针对政务云数据中心整合、虚拟化和自动化的特点,浪潮网络采用先进的软件定义网络技术,并实现网络能力、计算能力、存储能力的高度可拓展性。政府客户无需大规模升级或停机,就能根据实际需要经济、高效地保障系统连续稳定运行。 云数据中心的安全对于政务工作至关重要, 政务云数据中心的安全保护需要在所有层级执行统一的策略——从网络基础设施到计算应用。目前浪潮具备一整套的面向政府机构和企业组织的解决方案,浪潮网络则专注于保护政务云中数据基础设施的安全,为传输和存储中的数据提供安全保障。并采用独特的虚拟感知、业务隔离设计,以及基于角色的访问控制、强健的控制平面,加强传输数据的保密性和完整性,充分满足政务应用的安全要求。 因势而动 以先进产品技术深植政务云市场 根据IDC近期发布的《IDC MarketScape:中国政务云市场厂商评估,2017》报告显示:中国政务云市场发展迅速且商机巨大,特别是2014年以来,中国政务云市场实现了连续高速增长,2016年中国政务云市场基础设施投资规模已经接近百亿元人民币,并将在未来5年继续保持快速增长态势,年复合增长率预计将达到20%。 政务云作为助力政府行业数字化转型、服务化转型的关键支撑平台,不仅是政府客户关注的重点,也是各大云计算厂商的“必争之地”。作为浪潮云战略的重要网络支撑平台,未来浪潮网络将继续利用先进的网络技术理念、依托本地化产品创新、凭借对政务云市场网络应用的理解,推动政府信息化的快速发展,助力政府实现数字化转型、服务化转型,推动中国政务云市场蓬勃发展。 【责任编辑: 周雪 TEL:(010)68476606】

优秀的个人博客,低调大师

API开放赋能,打造DING功能快速抢占上亿用户

就在几天前,钉钉团队刚刚宣布用户数超过1亿!然后在钉钉里面有个特别让人苦恼,但又不得不惊喜的一大创新, Ding一下,如果你需要找一个人进行审批,或者是需要紧急联系某个人,但是又不想界入到直接电话呼叫的尴尬情境,通过钉功能发送短信、电话语音,站内信等方式就可快速的通知到接收人的手机上。在这个手机不离身的生活里,我相信用过这个功能的发起人肯定是效率大升,但是被钉的人第一次肯定会有被戏弄的感觉,但是又不得不为此感到惊讶。 做为钉钉的深度用户,在钉别人那刻,却实爽爆了。 但是要怎么去用这个ding,他有一些什么的场景呢? 近期经常会在线参与直播授课,老师在直播讲课时,全神专注,加上弹幕多,消息很快下沉。个别学员觉得老师讲的太快,或者是讲的不够通俗易懂。 这个时候“ding”就可以用到直播里面,可通过站内弹一条消息用ding住的方式把问号固定在上

资源下载

更多资源
腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称,一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集,帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册