清华开源深度学习框架计图 开源超级玩家再进阶 (清华开源软件)

文章编号:46251 资讯动态 2024-12-10 计图 清华大学 Jittor

雷锋网AI源创评论报道,据官方消息,清华大学计算机系图形实验室宣布开源一个全新的深度学习框架:Jittor,中文名计图。

Jittor 是一个采用元算子表达神经网络计算单元、完全基于动态编译(Just-in-TIME)的深度学习框架。[1]

据介绍,Jittor 内部使用创新的元算子和统一计算图的深度学习框架。和 Numpy 相比,元算子在保证易用性的同时,能够实现更复杂、更高效的操作。而统一计算图则是融合了静态计算图和动态计算图的诸多优点,在易于使用的同时,提供高性能的C++om/article/5978719a85a574b2d25b.html" target="_blank">优化。基于元算子开发的深度学习模型,可以被计图实时自动优化并且运行 CPU、GPU 等指定的硬件上。

Jittor 特性

Jittor 是基于易用、可定制、实现与优化分离、即时的理念设计的。用户只需要数行代码,就可定义新的算子和模型,且所有的代码都是即时编译运行。

在 Jittor 上,多个元算子之间可以相互融合,成为更加复杂的算子,进一步构成神经网络和深度学习应用。

清华开源深度学习框架计图,开源超级玩家再进阶

支持计算任意高阶导数。元算子在 Jittor 上反向传播后仍然是元算子,因此,在深度学习开发过程中,你不用算子的反向传播而重复开发。同时,还可以使用统一的优化策略。

清华开源深度学习框架计图,开源超级玩家再进阶

使用 Jittor 内置的元算子编译器,用户可以直接将通过元算子编写的 Python 代码动态编译成更高效的 C++ 代码。

清华开源深度学习框架计图,开源超级玩家再进阶

Jittor 能够自动优化动态编译的代码。其内置的优化编译遍(complier pass)兼容 LLVM,可以根据设备进行自动优化,生成的底层算子对计算设备非常友好。

清华开源深度学习框架计图,开源超级玩家再进阶

Jittor 统一管理 GPU 和 CPU 的内存。当深度学习耗尽 GPU 内存资源时,将用 CPU 内存弥补。

清华开源深度学习框架计图,开源超级玩家再进阶

Jittor 同时提供同步接口和异步接口,用户可以同时享受同步接口的易用性和异步接口的高效性。

清华开源深度学习框架计图,开源超级玩家再进阶

使用辅助转换脚本,PyTorch 代码可以直接转换成 Jittor 模型。在参数保存和数据传输上,Jittor使用和 PyTorch 一样的 Numpy+pickle 协议,二者的模型可以相互加载和调用

清华开源深度学习框架计图,开源超级玩家再进阶

性能超越 Pytorch

虽然这是清华大学第一次发布开源机器学习框架,但与国际主流平台相比,Jittor 豪不逊色。目前 ResNet、VGG、SSD、DeepLab、LSGAN 等多个网络模型已经在 Jittor 平台实现,可供用户使用。与同类型框架相比,Jittor 在收敛精度一致情况下,推理速度取得了 10%-50% 的性能提升 。

清华开源深度学习框架计图,开源超级玩家再进阶

目前,Jittor 得到了国家自然科学基金项目、北京信息科学与技术国家研究中心团队项目和清华-腾讯联合实验室项目的资助和支持。

清华开源深度学习框架计图,开源超级玩家再进阶

开源超级玩家

开源,特别是人工智能领域的开源,逐渐成为综合实力的象征。清华在这方面有着独到的优势。

首先,是在人工智能领域的学术传承。2019 年,清华人工智能研究院动作频频,在张钹院士的带领下,4 月成立听觉智能研究中心,由郑方教授担任主任,5 月成立基础理论研究中心,朱军任主任,在基础算法、AI 框架、AI 应用、数据资源等方面早已布好基础。

第一代院士打好基础,第二代老师形成了中坚力量。此次惊艳推出的计图(Jittor),牵头人就是清华大学计算机系的胡事民教授,1969 年生人,正属于中坚,而开发团队的主体,正是他带领的图形学实验室的一批博士生。今天出世的计图更不免让人想到当年的清华毕业生贾扬清,他在加州大学伯克利分校攻读博士期间创建了 Caffe 项目。

清华大学自然语言处理实验室(THUNLP)也有一个知名的开源项目,叫 OpenNRE。[2] 这是一个在自然语言处理里进行关系提取的开源框架,可以用于扩展知识图谱,是推荐系统、搜索引擎、问题解答这些应用的基础和关键技术。

实验室由孙茂松教授领衔,带出了一批骨干老师,以及本硕博的尖子。THUNLP 在 GitHub 上得到的 star,已经跟全球最强的斯坦福 NLP 小组的 star 差不多了。

由此带出的第三代学生梯队也人才济济。清华姚班自不必说,去年以本科人才培养著名的姚期智教授又开设智班,重点培养人工智能领域的后备军。

姚班毕业,目前在 MIT 就读的博士生胡渊鸣,设计、实现了 Taichi 编程语言及其优化编译器,后生可畏。[3]

另外,清华和企业以实验室形式的合作,硕果累累,吸引了像张亚勤、沈向洋这样的大师级科学家加入。

比如,清华和微软研究院合作了 Convlab 开源端到端对话系统 [4],和美团合作了视频动作分析的开源数据集 COIN [5]。

去年,清华-伯克利深圳学院更是成立了“RISC-V 国际开源实验室”,直接将图灵奖得主、最早提出“精简指令集”(RISC)体系的大卫·帕特森(David Patterson)引入,抓住了开源和源创的源头,有可能在芯片领域形成新的开源 CPU 生态体系,打造国家重器。

官网:

github:

[2] OpenNRE ,

[3] Taichi ,

[4] Convlab ,

[5] COIN ,

原创文章,未经授权禁止转载。详情见 转载须知 。

清华开源深度学习框架计图,开源超级玩家再进阶


本文地址: https://www.gpxz.com/article/b18d2cffc5358829eb8e.html
全局中部横幅
全局中部横幅
牛客网

求职之前,先上牛客,就业找工作一站解决。互联网IT技术/产品/运营/硬件/汽车机械制造/金融/财务管理/审计/银行/市场营销/地产/快消/管培生等等专业技能学习/备考/求职神器,在线进行企业校招实习笔试面试真题模拟考试练习,全面提升求职竞争力,找到好工作,拿到好offer。_牛客网_牛客在手,offer不愁

掌中商城

习水特产商城,茅酒网,习水掌中科技有限公司

物流公司

道旭物流公司凭借专业能力及服务意识,为客户提供超值的一体化三方物流服务;并不断地创新服务内容,使客户始终能够体验物流公司提供的“安全、及时高效、优质”的服务,全国服务热线4000116156

上海LED电子显示屏租赁

上海创龙led高清显示电子屏租赁电话15050474155,led透明屏出租、led弧形屏出租,舞台演出器材租借公司,18年专注于:婚礼led大屏租赁、庆典led大屏幕租赁、公司年会led显示屏租赁婚礼led大屏租赁、庆典led大屏幕租赁、公司年会led显示屏租赁,线阵音箱、电视机、LED电子高清显示屏、LED户外户外屏、舞台布置搭建、年会舞台布置、投影机租赁、篷房帐篷搭建、雷亚架的服务公司,致力于为企业提供一整套舞台布置搭建解决方案。

咨詢預約掛號服務中心

咨詢預約掛號服務中心-廣東省積善堂中醫醫院

内蒙古定制网站

国风魔力一站式建站服务,助力企业打造0基础建站。主要以定制网站、模板网站、网站开发、软件开发为主,为企业模板建站提供一条龙服务。

免费工资条群发软件

智能工资条系统免费提供工资条生成器,免费工资条群发软件,工资条群发助手,定制电话18850331555

廊坊贝尔特化工建材有限公司

廊坊贝尔特化工建材有限公司以生产玻璃棉、岩棉、橡塑、硅酸铝等保温材料。

钢结构不锈钢岗亭

上海岗亭厂家产品:保安岗亭、门卫岗亭、钢结构不锈钢岗亭等小区保安值班成品岗亭,更有豪华型真石漆岗亭。翼亭岗亭行业的智慧工厂。可来图来样设计岗亭,定制移动厕所、垃圾房等产品。翼亭岗亭厂家直销价格优惠,品质保证!覆盖浙江|上海|江苏|北京|天津|河北|山东|山西|江西|湖南|湖北|宁夏|安徽|内蒙古等全国地区

喂饱反应堆好玩吗

《喂饱反应堆》是一款关于向反应堆输入燃料以生成能量的增量式策略模拟游戏。玩家需要向反应堆持续输送燃料并组合各种元素来产生能量,随着能量的增长,可以升级工具、解锁奇异科技并探索神秘星系。揭开反应堆真正目的的秘密,将改变你的命运。

点钞练功券

定兴县宏达财会办公用品供应处是一家从事银行点钞练功券,外币练功券,调款包,ATM钞箱包系列,尾零箱,翻打传票及其它各种银行机具生产、开发、销售和服务于一体的综合性企业。

全局底部横幅