Julia Computing 和 MIT 引入可微编程系统,连接人工智能和科学计算
科学计算,是使用计算模型来解决科学和工程问题,它近年来从人工智能机器学习技术的迅速发展中获益良多。现在,研究人员正在探索连接这两个世界的方法。
Julia Computing & MIT 的一个研究小组提出,广泛的科学计算和机器学习领域都需要在其底层结构上支持线性代数。该团队引入了一种新的可微编程(∂P)形式的计算基础结构,它可以计算模型梯度,并将自动微分集成到语言中作为一种一流的特性。程序员可以直接用 Julia 编程语言和 microProgramming 编写模型。
该系统几乎支持所有的编程语言(Python,R,Julia 等),并能构造和编译高性能代码,而不需要任何用户干预或重构来进行计算。这使程序员能够使用现有的 Julia 科学计算包构建深度学习模型,并有效地实现梯度计算。
可微编程是一种编程范式,其中程序可以完全区分。基于提供的数据集,神经网络自动学习从输入数据 X 到最终操作结果 Y (都是整个程序)的映射;或者结合程序员提供的高级代码,神经网络作为中间函数来完成整个程序。
Facebook 首席人工智能科学家 Yann LeCun 对可微编程的使用发表了评论:
人们现在正在通过组装参数化功能块网络,并通过使用某种形式的基于梯度的优化,从实例中训练它们,从而构建一种新的软件。
作为机器学习和科学计算学科共同共享基础设施的基础,这种可微的编程系统通过使用相同的技术来区分两个领域中的程序,允许新的应用程序将各个领域结合起来。研究人员展示了与现有的 ML 框架相同的性能,用于深度学习模型(在 CPU、GPU 和 TPU 上)和增强学习。可微编程也可以扩展到其他科学计算领域,例如神经 SDE 和量子机器学习。
论文 ∂P:在 ARXV 上完成的桥梁机械学习与科学计算的可差异编程系统
Y Combinator 的研究员 Michael Nielsen 在推特上表示,他希望这篇新论文是探索这个方向的趋势的一部分。特斯拉人工智能(Tesla AI)董事 Andrej Karpathy 在推特对 Nielsen 的说:
我们将堆栈向上移动一点,而不是编写显式的、完全定义的程序,而是编写一个程序的粗略草图“管道”(由某个θ参数化的管道),如果您有一个可评估的度量,则通过优化来选择管中的最佳点。
来源:medium
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Dice 称这 5 种编程语言可能衰落
Dice Insights 是为北美的科技专业人士提供见解和分析的网站,目的是帮助他们找到工作和发展事业,并且报道就业趋势、新技术等内容。 根据Dice报道,并不是所有的编程语言都永远存在,因为新一代的开发人员会接受他们觉得更容易使用的其他语言和框架。为了确定哪种编程语言可能在中长期内注定失败,他们查看了 TIOBE 和 RedMonk 的受欢迎程度排名,以及 Dice 自己的职务公告数据库。列出以下语言: Ruby 很久以前,Ruby 很受欢迎。这是 Tiobe 月刊上的前十名语言,开发人员称赞它学习起来有多么容易。但是在过去的 18 个月里,Tiobe 的排名从第 9 位下降到了第 12 位。 另外发现,对 Dice 过去一年发布的招聘数据的分析显示,寻找精通 Ruby 的技术专业人员的公司数量大幅下降。2018 年,Ruby 的就业数量下降了 56%。这是一个巨大的警告信号,表明很多公司正在放弃 Ruby,如果是这样的话,该语言的用户基础可能会迅速减少到几乎一无所有。 Haskell 据说,Haskell 即将在 2020 年进行重大更新。有很多巨头公司和项目(Facebook、...
- 下一篇
OSChina 周四乱弹 —— 从小到大喜欢的女孩儿嫁给别人
Osc乱弹歌单(2019)请戳(这里) 【今日歌曲】 @tom_tdhzz :一个人看电影霸场什么体验#今日歌曲推荐# 分享keshi的单曲《just friends》: 《just friends》- keshi 手机党少年们想听歌,请使劲儿戳(这里) 网易云音乐也有好多故事的, 我看的时候还以为是搞笑的评论呢, 看完心思这么沉重。 一起心思沉重吧, 昨天红薯(@红薯 )也遇到了难过的事情, @红薯 :半夜起来撒尿,手机掉马桶里了 当时把楼下上厕所的吓坏了, “楼上红薯(@红薯 )是蹲厕所时间太长,把金丹都拉出来了么?” 作为这么大的一个互联网企业的站长, 都亲自上厕所, 这是一种多么务实的精神! @PPX_ :大家一定要务实,别搞那些花里胡哨的口号 所以当上司要求你加班的时候, 一定别抖机灵, @开源中国首席屌炸天 :岛国一位小哥和上司昨晚的对话……现在小哥正在人才市场找工作 一下失去了工作, 感觉一个家庭在崩溃的边缘, @antonius :#太难了# 没有别的, 就是感觉压力好大呀, “生活鸭力好大呀。” 可我也努力工作了, 但我还是很焦虑, 也许一个错过, 女友都不见了, @...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS6,CentOS7官方镜像安装Oracle11G
- MySQL8.0.19开启GTID主从同步CentOS8
- CentOS7,8上快速安装Gitea,搭建Git服务器
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- 设置Eclipse缩进为4个空格,增强代码规范
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- Mario游戏-低调大师作品