开源全家桶又添一 腾讯混元大模型公布最新进展 元 (正版全家桶)

文章编号:43217 最新资讯 2024-12-09 开源 AI 混元大模型

刚刚,腾讯混元大模型公布最新进展:正式上线视频生成能力,这是继文生文、文生图、3D生成之后的又一新里程碑。与此同时,腾讯开源该视频生成大模型,参数量130亿,是当前最大的视频开源模型。

“用户只需要输入一段描述,即可生成视频,”腾讯混元相关负责人透露,目前的生成视频支持中英文双语输入、多种视频尺寸以及多种视频清晰度。目前该模型已上线腾讯元宝APP,用户可在AI应用中的“AI视频”板块申请试用。企业客户通过腾讯云提供服务接入,目前API同步开放内测申请。

开源全家桶又添一“元”,混元大模型公布最新进展

通过腾讯元宝APP-AI应用-AI视频即可使用该功能(前期需申请)

在与国内外多个顶尖模型的评测对比显示,混元视频生成模型在文本视频一致性、运动质量和画面质量多个维度效果领先,在人物、人造场所等场景下表现尤为出色。

开源全家桶又添一“元”,混元大模型公布最新进展

腾讯混元视频生成大模型制作出的视频画质很逼真,内容也与提示词高度一致,确保画面的流畅性,减少形变,甚至在提示词是 emoji 表情的情况下,也可以稳定输出。

例如,在处理冲浪、舞蹈等包含大幅度动作的场景时,该模型能够生成流畅且合理的动作镜头,物体形变现象得到有效控制;在处理光影反射时,它能够基本遵循物理规律,如在镜面或照镜子的场景中,能够实现镜内外动作的一致性。此外,该模型还能在保持画面主角不变的情况下自动切换镜头,这是许多其他模型所不具备的高级功能。

开源全家桶又添一“元”,混元大模型公布最新进展

视频由腾讯混元视频生成,提示词:200mm长焦镜头,对准一只停在栏杆上的海鸥。羽毛的纹理清晰可辨,前景的木栏杆温柔虚化。远处的落日和海平面融化成金红色的光影

开源全家桶又添一“元”,混元大模型公布最新进展

视频由腾讯混元视频生成,提示词:暴风雪中,一列蒸汽火车在崎岖山间穿行,黑烟从车头直冲云霄,车厢在皑皑白雪中留下深邃轨迹,镜头以侧面追踪,捕捉机械巨兽破开风雪的磅礴气势,白雾与蒸汽交织成壮丽画卷,电影氛围,远景

开源全家桶又添一“元”,混元大模型公布最新进展

视频由腾讯混元视频生成,提示词:一个隐藏的瀑布流入清澈的池塘,周围是高大的树木和绿色植物。阳光穿过树叶,在下面的岩石和水面上形成斑点。逼真,茂密森林中的宁静瀑布,宁静、阳光明媚的日子,中景

开源全家桶又添一“元”,混元大模型公布最新进展

视频由腾讯混元视频生成,提示词:一位戴着复古飞行护目镜的机械师,半跪在蒸汽朋克风格的工作室里。她棕色卷发挽成发髻,零星的银色发丝闪着金属光泽。深棕色皮质工装背带裤上沾满机油污渍,袖口卷起露出布满齿轮纹身的手臂。特写她正用黄铜工具调试一只机械鸟,齿轮间冒出缕缕蒸汽,工作台上散落着铜管、发条和老式图纸。

它采用了与Sora相似的DiT架构,并在此基础上进行了多项优化。混元的视频生成模型通过引入新一代的文本编码器,显著增强了对语义的理解和遵循能力,这使得它在处理多主体场景时能够更加精确地执行指令并呈现细节;此外,该模型还采用了统一的全注意力机制,这不仅让视频帧之间的过渡更加自然,还实现了在保持主体一致性的前提下进行多视角切换;最后,混元通过采用先进的图像视频混合VAE技术(3D变分编码器),在细节捕捉上取得了显著进步,特别是在处理小尺寸人脸和快速运动镜头等复杂场景时表现尤为突出。

目前,腾讯宣布开源该视频生成大模型已在 Hugging Face 平台及 Github 上发布,包含模型权重、推理代码、模型算法等完整模型,可供企业与个人开发者免费使用和开发生态插件。基于腾讯混元的开源模型,开发者及企业无需从头训练,即可直接用于推理,并可基于腾讯混元系列打造专属应用及服务,能够节约大量人力及算力,加速行业创新步伐。

据了解,从年初以来,腾讯混元系列模型的开源速度不断加快。此前,腾讯混元已经开源了旗下文生文、文生图和3D生成大模型。至此,腾讯混元系列大模型已实现全面开源。

原创文章,未经授权禁止转载。详情见 转载须知 。

开源全家桶又添一“元”,混元大模型公布最新进展


本文地址: /article/99afabfb2fdf67908bef.html
全局中部横幅
全局中部横幅
微词云 · 简单强大的文字云艺术生成器

微词云是一款实用性强、简单的在线文字云、在线词云图生成器,相对于其他产品,我们的产品功能更加强大,不仅支持在线分词,还支持词频统计、词频分析。无论您是设计、运营、学生老师、数据分析师,都可以简单的做出令人眼前一亮的文字云设计。

软件开发|网站建设|小程序开发|APP开发|游戏开发-猪八戒网

猪八戒网专业为企业和个人提供网站建设,小程序开发,APP开发,游戏开发等解决方案,是您值得信赖的服务外包平台。

电脑租赁-笔记本电脑租赁-台式电脑租赁-办公电脑租赁平台-电脑租赁服务-微租网

电脑租赁,笔记本电脑租赁,台式电脑租赁,办公电脑租赁平台就选上海描云网络技术有限公司。微租网12年深耕办公电脑租赁,与企业深入沟通业务及办公规模,按需提供定制化租赁方案。

腕表售后维修客户服务中心|手表维修点/店_手表维修地址_售后服务中心电话查询_名表售后网点

名表维修网是专业的手表维修保养信息服务中心,主要提供腕表维修、腕表保养、腕表修复、手表更换配件等名表维修服务.手表维修店官方授权,专业值得信赖,找全国各地区腕表售后维修点地址、客服电话及网点的查询服务就上铭表维修网.

热门旅游路线分享_景点打卡攻略  -  旅微博

旅微博(www.lvweibo.com)一个乐在分享国内外热门旅游路线,旅游景点介绍,网红景点打卡攻略的网站,提供自驾游徒步行程路线资讯信息,是广大旅行爱好者值得信赖的伙伴。

麻辣IT网 - 郑州科技市场,河南科技市场,河南郑州IT,IT批发渠道

麻辣IT网位于河南郑州,依托于郑州科技市场、河南科技市场、郑州百脑汇,,是权威it渠道批发网,包括笔记本,电脑,手机,OA,DV,MP3,MP4,数码相机各类的行情报价.这里汇集了30多万家高信誉度的IT经销商代理商,点击与商家直接交流。

首页 - 有安全更靠谱、蜂群信服,BEEIOE, 蜂群信息服务,BEEITO,蜂群(深圳)信息服务有限责任公司,

蜂群信服、有安全更靠谱,基于对IT业务场景的深刻理解,和15年行业的实践应用,帮助客户高效管理IT资源。 轻松保护您的数字业务,从虚拟专用网络到入侵检测,从应用开发到数据安全...

化妆品代加工厂家_面膜OEM工厂_护肤品生产厂-广州爱尼丝化妆品

爱尼丝化妆品是一家集化妆品代加工、面膜OEM、护肤品OEM、精油OEM、原液OEM、身体药油OEM、水乳霜OEM、致力服务电商微商,日化线专业线的广州化妆品代加工厂家。

四川环保水处理网_全自动净水器 一体化净水器 防草除砂取水头 生活污水处理设备 医院污水处理设备

通给水处理设备有限责任公司是四川地区专业生产水处理设备的厂家,生产全自动净水器、除铁除锰净水器、一体化净水器、防草除砂取水头、地埋式生活污水处理设备、医院污水处理设备,可满足大中小企业工厂学校的净水需求。

手术室净化装修-手术室净化工程公司-华锐手术室净化厂家

华锐净化工程(www.yjhj.net)是一家专业从事层流手术室净化工程装修的特殊科室建设厂家。我们提供高质量的手术室净化装修服务,为医院提供安全、卫生的工作环境。

暖气片一站式采购批发平台-暖气片网

暖气片网(3171688.COM)-网上暖气片批发市场,为您提供暖气片厂家信息及钢制、铸铁、纯铜、卫浴、压铸铝、石墨烯、搭接焊、电暖气、钢制板式、铜铝复合、钢铝复合、钢制翅片、电热毛巾架等暖气片产品价格,报价,参数,评价,图片,品牌等信息。

全局底部横幅