AI模型落地难 试试这个15分钟搞定的开源工具! (ai模型落地是部署吗)

文章编号:42044 资讯动态 2024-12-03 旷视天元

自古兵家作战就讲究一个「度」。

公元 200年,官渡之战后。死敌袁绍的残兵败卒远逃塞北,劳师远征还是穷寇莫追,曹操陷入纠结。鬼才谋士郭嘉建言道:“用兵贵在神速!远征千里之外,辎重多、行军慢,敌人定会有所察觉。不如留下笨重的物资,轻车简从昼夜兼程,攻敌不备定可一战功成。”

曹操采纳了建议,亲率数千精兵突袭,旋即取得了胜利。

兵贵神速,绝非妄言。

曹操轻车简从昼夜兼程是极致效率的体现,同样的,在现代的科技领域,需要紧急交付应用的时刻,将开发完成的模型快速部署、快速应用,其背后体现的工程效率有时也事关成败。

近日, 旷视天元 MegEngine 将面向计算机视觉应用的 MegFlow 流式计算框架开源,奉上一套可快速完成 AI 应用部署的视觉解析服务方案。

AI模型落地难? 试试这个15分钟搞定的开源工具!

通过使用 MegFlow,AI 算法开发者可以快速完成 AI 模型的落地应用。

我们就拿一个电瓶车检测的例子,小中见大吧。

今年 5月10日,成都成华区一小区电梯内电瓶车起火,导致包括一名女婴在内的多人烧伤。这样的悲剧事件绝不是孤例,管理人员本可以及时察觉并制止电动车进入楼梯间等楼内公共区域停放或充电。

MegFlow提供的“开箱即用”应用就包括电瓶车检测:基于 MegFlow 提供的图像和视频解析服务,最快 15 分钟即可完成客制化电瓶车检测功能,并完成快速部署。这是一种为物业管理者提供的智能化管理工具。当摄像头检测到电瓶车进入楼内公共区域,系统会第一时间发出警告,提醒管理人员快速制止,有效排除起火安全隐患。所谓“生命安全大于天,能快一点是一点”。

AI模型落地难? 试试这个15分钟搞定的开源工具!

MegFlow ——三步部署神器

“炼丹本是枯燥事,奈何部署再难人。” 经历过AI应用上线的开发者肯定深有体会,要让一个模型从丹炉走出来到落地应用所涉及的东西又多又杂,技术储备不足或人手不够的团队很难在短时间内搞定所有事情。旷视最近开源的 MegFlow是针对这一痛点开出的一剂良药。

旷视的工程师在总结了内部多年的 AI 应用工程落地经验之后,搭建了一条从“炼丹”到落地的高速公路,这就是 MegFlow 流式计算框架。

MegFlow 将资源、消息、任务等概念进行清晰一致的抽象化,做到将冗长的算法交付流程简化为模型训练、业务集成、交付验收三步完成。

AI模型落地难? 试试这个15分钟搞定的开源工具!

MegFlow三大特点助力提升工程效率

MegFlow 针对 AI 算法工程落地中的频发问题,诸如性能调优、安全性、模型加密等,都能提供行之有效的解决方案,并有效提升了工程效率。

MegFlow 拥有安全可靠、简单易用、语义支持丰富等特性。在这三大特性的保证之下,MegFlow 可以轻松助力 AI 应用快速落地。

简单易用

MegFlow 支持 Python 插件,且仅需要开发者编写同步的 Python 程序,即可实现可以被 MegFlow 异步调度的 Python 插件。同时 MegFlow 提供了一套基于 Web UI 的可视化调试工具,可有效提升模型部署的工作效率。

语义支持丰富

在表达能力上,MegFlow 支持静态图、动态图和共享图,辅以 demux、reorder、transform 等函数式语义的通用插件,为搭建多样化的 AI 服务提供了丰富的语义支持。

安全可靠

一般而言,工程效率的提高往往意味着安全性能可能会随之相应下降,但是MegFlow对于安全性的把控做得非常好,完全安全可靠。在技术选型上, MegFlow 的研发团队认真负责地调研了多种技术方案,最终选择了安全且零额外开销的 Rust 异步生态,从基础上保证了 MegFlow 的安全性与性能。

旷视开源进行时

2020年3月,旷视开源了内部使用多年的深度学习框架旷视天元,并以天元为核心,逐步丰富完善其开源生态,覆盖图像分类、图像检测、图像分割、关键点、自然语言处理、生成对抗网络等各类模型和工程项目。不久前,旷视开源了YOLOX 系列高性能目标检测算法,一度登上GitHub trending榜。

除了工作效率之外,旷视在解决成本效率上也很给力。今年4月,开源深度学习框架 MegEngine引入动态图显存优化(DTR)技术并进行进一步的工程优化,提供了一种通过额外计算减少显存占用的途径,只需两行代码,可以在相同显存情况下,让用户训练 3 倍大的模型。在使用 DTR 功能后,11G显存的2080Ti 可以训练出原本32G显存的V100才能训练的模型,可以节省很多 Money!

总结

天下武功,唯快不破。

追求高效率、省时省力是当今科技公司必修的一门课。

AI 在不断发展的过程中,解决长尾场景的能力越来越强大,可以预见的是像 MegFlow 这类高效的 AI 落地方案,可以更加便捷地解决这些问题。

务实的旷视做扎实的技术,在提供靠谱的技术解决方案、降本增效的路上一发不可收拾。

点击 链接 ,即刻体验MegFlow,快速实现模型落地应用。

原创文章,未经授权禁止转载。详情见 转载须知 。


本文地址: https://www.gpxz.com/article/c0c14b49e352af2529e3.html
全局中部横幅
全局中部横幅
风行

新一代视频风行网,提供免费电影、电视剧、综艺、动漫、体育等视频内容的在线观看和下载.累积7亿用户的全平台,为传媒机构和品牌客户开设了官方视频服务账号,通过大数据分析与个性推荐订阅技术,实现海量独家内容与用户个性需求即时匹配.

一门APP

一门APP开发平台(www.yimenapp.com)致力于H5混合APP制作框架领域的前沿探索,专注轻便的应用开发解决方案,提供基于HTML前端页面在各种应用层级的端延展,包括安卓端,IOS端,windows端,MAC端,以及各种TV和物联网端的跨平台APP开发工具。

我家在线

我家在线是一个有范儿的、有视角的、个性化商业资讯与交流平台,核心关注对象是包括公众公司与创业型企业在内的一系列优秀公司

智慧消防

深圳市智联卫士科技有限公司专业从事智慧城市,智慧应急,智慧消防,智慧救灾,智慧环保,智慧养老,智慧工地,智慧安防,智慧社区,智慧家庭安全,消防物联网,物联网消防平台设备研发和制造!

高低温

无锡市翼搏凡环境试验设备有限公司志于各种环境试验设备的开发和生产。主要经营有:高低温试验箱,恒温恒湿试验箱,冷热冲击试验箱,高低温交变湿热试验箱,振动台,甲醛voc气候箱,淋雨试验箱,恒温试验箱,盐雾腐蚀试验箱。

烟花爆竹.花炮.鞭炮.焰火燃放

中国烟花爆竹网,中国烟花爆竹平台,提供烟花爆竹价格,烟花爆竹展会,烟花爆竹资讯,烟花爆竹购买。

牡丹芍药

菏泽中欣牡丹园艺有限公司是一家专门从事园林绿化种植、加工、销售、出口、售后于一体的企业,公司产品有果木、苗木、花卉、绿植、爬藤等园艺植物。欢迎咨询:13605308985

湖南跨线桥航天科技有限公司

湖南跨线桥航天科技有限公司是一家集设计、研发、生产、销售为一体的高新技术企业,经过多年积累,在卫星导航信号模拟、高动态高精度卫星导航产品测试、阵列抗干扰产品测试、高动态定位等方面具备核心技术优势。

法式冷冻薯条

遵化市遵美味食品有限公司是一家从事产品深加工企业,河北省唐山市重点龙头企业。公司主要经营真空低温油浴(VF)脱水果蔬(果蔬脆片),包括:薯条、香菇脆片、各类水果蔬菜脆片;速冻薯条、速冻香菇等各种蔬菜水果是集产、学、研、加、销为一体的农业高新技术企业。

彩色透水混凝土

彩色透水混凝土、艺术压花地坪是绿荫景观工程的品牌服务,是一家专门从事地面材料与工程施工的公司,专注于生态铺装技术、道路彩色化等技术。

传奇私服发布网,新开传奇网站,热血传奇sf

传奇私服发布网-传奇新服开服网是一个专注于传奇私服游戏的发布平台,这里汇聚了最新最全的传奇SF游戏资源内容、私服传奇开服知识、热血传奇sf攻略技巧等,让您轻松掌握游戏动态,抢先体验传奇新服乐趣!

100国际学校招生

100国际学校招生,专业国际教育学习顾问。100国际教育为全国家长、学生提供全国国际学校资讯信息、新闻动态、校园开放日、招生简章等。帮助意向申请国际高中、国际初中、国际小学、国际幼儿园的学生及家长进行择校服务。


全局底部横幅