微软开源 Visual ChatGPT，五天斩获两万 stars-低调大师

微软开源 Visual ChatGPT，五天斩获两万 stars

2023-03-15 349 89

除了大力投资 Open AI ，微软还亲自下场大搞 AI 。5 天前，微软开源了 Visual ChatGPT ，这个软件可以连接 ChatGPT 和一系列视觉模型，以实现在 ChatGPT 的聊天过程中发送和接收图像。

众所周知，尽管 ChatGPT 的功能非常强大，甚至可以用来写小说写论文，但目前也仅限于文字交流。~~但表情包早已成为日常文本聊天不可或缺的功能。~~

Visual ChatGPT 的出现，就像在以文字交流的 APP 中首次添加了表情包功能，而且还是根据用户输入的文本自动生成的“定制化表情包”，大大提升了 ChatGPT 的趣味性和应用领域。

一方面，ChatGPT（或 LLM）充当通用界面，提供对图像的理解和用户的交互功能。另一方面，基础图像模型通过提供特定领域的深入知识来充当背后的技术专家。

仓库中列出了技术架构及原理图：

Demo 中共进行了三种不同类型的对话，分别是 Visual ChatGPT 接收用户的图像、Visual ChatGPT 根据用户的文本修改图像并发送给用户，以及 Visual ChatGPT 识别图片，并回答用户的提问。 Visual ChatGPT 会根据用户的输入，判断是否需要使用 VFM （Visual Foundation Model，视觉基础模型）来处理该问题。

仓库中还给出了 Visual ChatGPT 所使用的图像模型和显存使用情况：

更详细的内容可以阅读 Visual ChatGPT 的 arxiv 论文：Visual ChatGPT: Talking, Drawing and Editing with Visual Foundation Models

Visual ChatGPT 在 3月 10 日发布，截至 3 月 15 日早 9 点，该项目已暂获 19547 个 Stars ，可谓是火箭式上涨。

微信关注我们

原文链接：https://www.oschina.net/news/232627/microsoft-visual-chatgpt

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

微软多个 Windows 系统存在远程代码执行漏洞(ICMP协议)

漏洞描述 Internet Control Message Protocol (ICMP) 协议是TCP/IP协议簇的一个子协议，用于在IP主机、路由器之间传递控制消息。raw socket 是一种网络套接字，不需要任何传输层协议格式即可发送/接收IP协议数据包。受影响版本的 Windows 系统中的应用程序绑定 raw socket 时，TCPIP 驱动程序在处理错误的 ICMP 包时存在内存漏洞，攻击者可以向目标计算机发送一个报头中包含一个碎片 IP 的 ICMP 数据包，造成 Windows 系统的 tcpip.sys 驱动崩溃或远程执行恶意代码。漏洞名称微软多个 Windows 系统存在远程代码执行漏洞(ICMP协议) 漏洞类型代码注入发现时间 2023-03-15 漏洞影响广度广 MPS编号 MPS-2023-1376 CVE编号 CVE-2023-23415 CNVD编号 - 影响范围 Windows Server 2008@(-∞, Mar 14, 2023) Windows Server 2012@(-∞, Mar 14, 2023) Windows Ser...

366

我的语言模型应该有多大？

本文发表于 2020 年 6 月 8 日，虽然时间较久远，但现在看起来仍然是非常有价值的一篇文章。在这个全民 LLM 的狂欢里，想测测你拿到的预算够训一个多大的模型吗？本文会给你一个答案，至少给你一个计算公式。在自然语言处理领域，有时候我们恍惚觉得大家是为了搏头条而在模型尺寸上不断进行军备竞赛。 1750 亿参数无疑是一个很抓眼球数字！为什么不考虑高效地去训一个小一点的模型？其实，这是因为深度学习领域有一个挺惊人的缩放效应，那就是: 大神经网络计算效率更高。这是以 OpenAI 为代表的团队在像神经语言模型的缩放定律这样的论文中探索出的结论。本文的研究也基于这一现象，我们将其与 GPU 速度估计相结合，用于确保在进行语言模型实验时，我们能根据我们算力预算来设计最合适的模型尺寸 (剧透一下，这个大小比你想象的要大！)。我们将展示我们的方法是如何影响一个标准的语言建模基准的架构决策的: 我们在没有任何超参优化的前提下，仅使用了原论文 75% 的训练时间，复现了 Zhang 等人的 Transformer-XL 论文中的 14 层模型的最佳结果。我们还估计来自同一篇论文的 1...

346

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。