Ollama 已支持 RWKV-7 模型,可灵活开关思考模式
Ollama 最新版本已支持 RWKV7-G1 和 RWKV-7-World 系列模型。
3 月初,随着 RWKV 社区成员 @MollySophia 的 PR 被合并,llama.cpp 正式支持 RWKV-7 模型。Ollama 近期更新了最新版 llama.cpp,因此同步支持 RWKV-7 架构和对应模型。
Ollama 官方模型仓库现已包含 RWKV-7 系列模型(推荐使用 RWKV7-G1 系列模型):
- RWKV-G1:https://ollama.com/mollysama/rwkv-7-g1
- RWKV-7-World:https://ollama.com/mollysama/rwkv-7-world
在 Ollama 中运行 RWKV 模型
以下是在 Ollama 中体验 RWKV-7 G1 2.9B 模型的最简路径。
- 在 https://ollama.com/download 页面,根据您的系统下载 Ollama 安装包:
- 下载完毕后,双击安装包以安装 Ollama。任务栏出现 Ollama 图标时,意味着安装已完成:
- 在终端中运行
ollama run mollysama/rwkv-7-g1:2.9b
命令,Ollama 将自动下载并运行 RWKV7-G1 2.9B 模型。您可以在终端中与 RWKV 模型进行对话,如下图所示:
若您曾经下载过
mollysama/rwkv-7-g1:2.9b
模型,请运行ollama pull mollysama/rwkv-7-g1:2.9b
命令,拉取最新的变更。
- Ollama 的 RWKV7 G1 模型默认开启思考模式,可以通过
/set nothink
和/set think
命令灵活地开关思考模式:
- 使用
ollama stop mollysama/rwkv-7-g1:2.9b
命令可以停止当前模型实例,从而重置对话上下文,否则 Ollama 会**持续保留当前会话的上下文(历史消息)**作为后续对话的参考
Ollama 官方仓库提供
Q6_K
量化的 RWKV7 G1 模型。如需使用其他量化类型,需手动创建自定义 RWKV 模型 ,详细教程请在 RWKV 教程 - Ollama 推理 中查看。
RWKV Chat 端侧聊天助手
除了在 Ollama 中运行 RWKV 模型,我们也推荐使用 RWKV Chat 端侧聊天助手体验 RWKV 模型。
RWKV Chat 是 RWKV 官方推出的离线 AI 聊天应用,针对各类端侧设备进行深度推理优化。APP 内含多种小参数模型,支持会话配置调整、灵活切换思考模式,是你的高效生产力伙伴!
在开启和关闭思考模式两种情况下,RWKV Chat 回答同一个问题:
- 下载 RWKV Chat APP:https://rwkvos.com/rwkv-chat
加入 RWKV 社区
欢迎大家加入 RWKV 社区,可以从 RWKV 中文官网了解 RWKV 模型,也可以加入 RWKV 论坛、QQ 频道和 QQ 群聊,一起探讨 RWKV 模型。
- 📖 RWKV 中文文档:https://www.rwkv.cn
- 💬 RWKV 论坛:https://community.rwkv.cn/
- 🐧 QQ 频道:https://pd.qq.com/s/9n21eravc
- 📺 BiliBili 视频教程:https://space.bilibili.com/3546689096910933

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
华为自研仓颉编程语言将于 7 月 30 日开源
在华为开发者大会HDC 2025期间,华为宣布仓颉编程语言将于7月30日开源。 2024 年 6 月,华为终端 BG 软件部总裁龚体宣布,下一代编程语言仓颉今日起正式开启预览。官网介绍显示,仓颉编程语言是一款面向全场景智能的新一代编程语言,主打智能化、全场景、高性能、强安全。融入鸿蒙生态,为开发者提供良好的编程体验。 其具体特性表现为: 高效编程:面向应用开发,希望语言能够易学易用,降低开发者入门门槛和开发过程中的心智负担,支持各种常见的开发范式和编程模式,让开发者简洁高效地表达各种业务逻辑。仓颉是一门多范式编程语言,支持函数式、命令式和面向对象等多种范式,包括值类型、类和接口、泛型、代数数据类型、模式匹配、以及高阶函数等特性。此外,仓颉还支持类型推断,能够减轻开发者类型标注的负担;通过一系列简明高效的语法,能够减少冗余书写、提升开发效率;语言内置的各种语法糖和宏(macro)的能力,支持开发者基于仓颉快速开发领域专用语言(DSL),构建领域抽象。 安全可靠:作为现代编程语言,仓颉追求编码即安全,通过静态类型系统和自动内存管理,确保程序的类型安全和 null safety 等内存安全;...
- 下一篇
鸿蒙正当时 | HarmonyOS 开发者实战工坊上海站圆满收官
2025年6月20日,中国上海 —— HarmonyOS 开发者实战工坊·开发者系列沙龙在热烈的技术交流氛围中圆满收官。本次活动吸引了众多开发者齐聚一堂,通过主题演讲、实战经验分享与大咖深度互动,共同探讨鸿蒙生态发展的前沿趋势与核心技术,现场交流热烈,创新思维涌动,参与者纷纷表示收获颇丰。 “鸿蒙为开发者构建了一个天然的平台,超越单一平台限制,助力开发者构想和创造服务于多设备互联、高可靠环境的创新应用。希望通过共创协作,我们能够相互成就,共同成长!”上海对外经贸大学开源创新与数字治理研究院院长、上海开源信息技术协会创始人张国锋先生为活动致辞。 张国锋也进一步阐述时代机遇:这是一个万物互联、场景融合的时代。传统的设备界限正被打破,用户期待的是无缝流转、高度协同的智慧体验。鸿蒙操作系统,以其与生俱来的分布式基因和对全场景连接的深刻理解,正在为这场深刻的范式转变奠定基础。这样的技术趋势,为我们每一位开发者,尤其是金融、互联网等各行各业的应用开发者们,开启了前所未有的机遇之门。 在深度洞察行业趋势的开篇之后,活动话题随即转向技术实践深度分享。 三位重量级技术专家轮番登场,分别从不同维度深入剖析...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS8编译安装MySQL8.0.19
- 设置Eclipse缩进为4个空格,增强代码规范
- CentOS7设置SWAP分区,小内存服务器的救世主
- CentOS7,8上快速安装Gitea,搭建Git服务器
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- CentOS关闭SELinux安全模块
- Red5直播服务器,属于Java语言的直播服务器
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题