字节跳动发布OmniHuman 多模态框架
2 月 6 日消息，字节跳动近日发布了一项重大成果 ——OmniHuman 多模态框架，其优势在于其强大的视频生成能力。用户只需提供一张任意尺寸和人物占比的单张图片，再结合一段输入音频，就能生成栩栩如生的人物视频。
与传统 AI 模型不同，OmniHuman-1 能够生成逼真的全身动画，并且可以精准地将手势和面部表情与语音或音乐同步，打破了以往只能生成面部或上半身动画的局限。
基于约 19000 小时的人类运动数据训练，OmniHuman-1 模型支持不同的体型和画面比例，能在内存限制内生成任意长度的视频，并适应不同输入信号，在真实性和准确性方面超越其他同类动画工具。值得一提的是，它还支持卡通角色、人工物体、动物以及复杂姿势的输入，确保生成的动作特征与每种风格的独特特点相匹配。
在实际应用场景中，OmniHuman 潜力巨大。在影视制作领域，创作者能轻松为虚拟角色打造全身动作戏份；虚拟直播里，主播动作更加自然，可增强直播的趣味性与吸引力；游戏世界中，数字人 NPC 的动作和表情更丰富，能提升玩家的沉浸感。
声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。
举报投诉
-
AI
+关注
关注
88文章
35506浏览量
281403 -
人工智能
+关注
关注
1809文章
49164浏览量
250744 -
字节跳动
+关注
关注
0文章
347浏览量
9544
发布评论请先 登录
相关推荐
热点推荐
海康威视发布多模态大模型文搜存储系列产品
多模态大模型为安防行业带来重大技术革新，基于观澜大模型技术体系，海康威视将大参数量、大样本量的图文多模态大模型与嵌入式智能硬件深度融合，发布
字节跳动否认赵明加盟及自研手机传闻
近日，市场传出荣耀前CEO赵明即将加盟字节跳动，并可能主导其手机业务的消息。与此同时，还有传闻称字节跳动有意推出主打AI概念的手机产品，这一系列传闻引发了业界的广泛关注。 针对这些传闻
字节跳动即将推出多模态视频生成模型OmniHuman
字节跳动旗下一站式AI创作平台即梦AI即将迎来重大更新，全新多模态视频生成模型OmniHuman即将上线。这款模型是
快讯：字节跳动否认120亿美元投资AI
对于传闻中的字节跳动计划2025年在人工智能基础设施上投入超120亿美元的消息，字节跳动回应称消息并不准确。 ? ?
字节跳动豆包大模型1.5 Pro发布
近日，字节跳动旗下的豆包大模型迎来了全新的升级——豆包大模型1.5 Pro正式发布。这款全新模型在知识、代码、推理、中文等多个测评基准上表现出色，综合得分优于GPT-4o、Claude 3.5 Sonnet等业界知名模型，标志着
字节跳动发布豆包大模型1.5 Pro
字节跳动正式发布了豆包大模型1.5 Pro。 全新的Doubao -1.5 - pro模型综合能力显著增强，在知识、代码、推理、中文等多个测评基准上，综合得分优于GPT - 4o、Claude
字节跳动发布海外AI中文开发环境IDE：Trae
近日，字节跳动正式推出了一款全新的AI Coding产品——Trae(trae.ai)，该产品专为海外专业开发者设计，旨在实现从Copilot向Autopilot的跨越式演进。这款创新工具由字节
字节跳动与努比亚合作开发AI手机
近日，有消息称字节跳动已经选择努比亚作为其合作伙伴，共同开发AI手机。据悉，双方已经签订了框架协议，明确了合作的具体内容和时间表。 根据协议内容，字节
字节跳动否认与中兴通讯合作传闻
近日，有关字节跳动旗下豆包大模型将内嵌手机并与中兴通讯探讨成立新品牌的消息引发了市场的广泛关注。然而，字节跳动方面对此明确予以否认，称并未与中兴通讯就上述事宜展开讨论。 据
字节跳动上调年终激励，激发员工创造力
近日，字节跳动公司向全体员工发布了一封内部邮件，宣布了一项重要的激励政策调整。为了表彰和奖励在工作中表现优异的员工，字节跳动决定加大年终激励
字节跳动自研视频生成模型Seaweed开放
近日，字节跳动旗下的AI内容平台即梦AI传来新消息，宣布自研的视频生成模型Seaweed即日起正式面向平台用户开放使用。这一举措标志着字节跳动在AI视频领域迈出了坚实的一步。
字节跳动计划在欧洲设立AI研发中心
字节跳动正积极布局欧洲市场，计划在该地区设立AI研发中心。据知情人士透露，字节跳动已开始在欧洲寻找LLM(Large Language Model，大语言模型)和AI领域的技术大牛，积
字节跳动开启新一轮股权回购
字节跳动近日向员工发布了新一轮股权回购的邮件通知。此次回购中，在职员工的税前回购价定为每股180.7美元，而离职员工的回购价则为153.6美元。
字节跳动否认与台积电合作AI芯片
近日，关于字节跳动计划与台积电携手开发AI芯片的报道引发关注。对此，字节跳动迅速作出回应，明确表示该报道不实。字节方面透露，公司确实在芯片领
工商网监
评论