WAIC 2024|首个“可控”人物视频生成大模型来了 分钟级人物视频AIGC一键生成

7月4日,世界人工智能大会(WAIC 2024)在上海召开,由商汤科技打造的首个面向C端用户的可控人物视频生成大模型——Vimi入选WAIC展览展示最高荣誉“镇馆之宝”,成为本届大会最具创新展品。Vimi基于商汤日日新大模型的强大能力,仅通过一张任意风格的照片就能生成和目标动作一致的人物类视频,并支持多种驱动方式,可通过已有人物视频、动画、声音、文字等多种元素进行驱动。

WAIC 2024|首个“可控”人物视频生成大模型来了 分钟级人物视频AIGC一键生成

精准表情控制!

首次实现分钟级可控、唯美人物视频生成

随着大模型和生成式AI技术的快速发展,让照片中的人物动起来已经不是新鲜事。但目前市面上的相关产品在实际应用中存在诸多痛点,有的人物动作、表情动作无法精准控制,只能频繁尝试各种Prompt抽卡;有的效果稳定性不高,人物长相、背景效果变幻莫测;有的时长有限,只能生成3~4秒视频等诸多限制创作的问题,无法满足广大视频创作者的使用需求。为了解决这些应用中的实际问题,商汤可控人物视频生成大模型Vimi应运而生。

据商汤介绍,与图片表情控制类技术只能控制头部表情动作不同,Vimi不但可以实现精准的人物表情控制,还可实现在半身区域内控制照片中人物的自然肢体变化,并自动生成与人物相符的头发、服饰及背景变化。同时光影变化也能做到合理生成,让人物动作和视觉效果流畅自然,画面和谐唯美。更重要的是,Vimi具备极强的稳定性,可稳定生成长达1分钟的单镜头人物类视频,画面效果不会随着时间的变化而劣化或失真,真正满足娱乐互动等需要长时间稳定视频生成需求。

WAIC 2024|首个“可控”人物视频生成大模型来了 分钟级人物视频AIGC一键生成WAIC 2024|首个“可控”人物视频生成大模型来了 分钟级人物视频AIGC一键生成

(可生成自然的光影、头发的飘动、一致的运镜)

据悉,Vimi以商汤日日新大模型体系为基础,结合商汤在计算机视觉领域的多年技术积淀和经验积累,能够精准识别和理解复杂的人物图片,并通过强大的AIGC能力,实现和谐、稳定的视频内容生成。目前,Vimi已在商汤科技官网开放预约。

文/广州日报新花城记者:张露、文静、李晓璐、陈庆辉

广州日报新花城编辑:龙嘉丽

【来源:经济界】凡本网注明“来源:经济界” 的所有作品,版权均属于经济界。如转载,须注明“来源:经济界”。违反上述声明者,本网将追究其相关法律责任。
上一篇 2天前
下一篇 2天前

相关推荐

  • 聚焦“新质生产力路在何方”等六大问题,社科院王立胜新著出版

    澎湃新闻(www.thepaper.cn)记者从中国民主法制出版社获悉,由中国社会科学院哲学研究所研究员王立胜等撰写的《新质生产力——高质量发展的新引擎》一书近日由该出版社出版。 王立胜是中国社会科学院哲学研究所研究员,博士生导师,享受国务院政府特殊津贴,曾任中国社会科学院哲学研究所党委书记、副所长,主要学术领域包括中国马克思主义哲学研究、马克思主义政治经济…

    20小时前
    0
  • NVIDIA喜笑颜开,中国互联网企业再度大举采购,国产芯片的无奈

    外媒引述知名投行摩根士丹利的分析指出,中国互联网企业在等待超过半年时间之后,再度大举采购NVIDIA的AI芯片,即使它的定制芯片性能较弱,但是仍然以生态等方面的优势赢得了中国企业的高度认可。 NVIDIA当下可以对中国供应的AI芯片为定制版的H20,性能较高端芯片阉割了八成的性能,而且定价超过10万元,昂贵的价格和性能偏弱,让国内互联网企业一度颇为不满,曾暂…

    21小时前
    0
  • “AIGC +”如何深度链接千行百业? 这场圆桌论坛给出答案

    《科创板日报》7月5日讯(记者 李明明)当下,在AIGC驱动下,所有行业都值得被重新思考。“AIGC+”概念正驱动千行百业生态重塑,各行各业不断涌现出新想法、新机遇,各领域纷纷迎来应用创新和产业升级。 在这一大背景下,加快AIGC技术与各行业深度融合刻不容缓。其中,也涌现出很多新问题:AIGC技术如何推动行业创新?如何为不同行业带来新的商业机会?企业如何评估…

    22小时前
    0
  • AIGC长图:洪水来了别慌,这些防范自救方法请查收

    近期,我国多地遭遇持续强降雨,引发洪水等自然灾害。中央气象台7月4日继续发布暴雨蓝色预警,预计,7月4日14时至5日14时,陕西中南部、四川盆地中东部、山西南部、河南西北部及西藏东南部、云南西北部等地部分地区有大到暴雨,其中,陕西南部、四川盆地北部等地局地有大暴雨(100~180毫米)。遭遇暴雨洪水时如何有效避险自救?洪水过后要注意哪些关键事项?一起了解。 …

    1天前
    0
  • 人工智能大会深观察|没有应用的基础模型一文不值?AI自主发展会不会威胁人类?

    2024年7月4日,2024世界人工智能大会暨人工智能全球治理高级别会议开幕式在上海举行。视觉中国 图 7月4日,2024世界人工智能大会暨人工智能全球治理高级别会议(WAIC2024)开幕。本次大会直面人工智能治理这一全球议题,向全球发布了《人工智能全球治理上海宣言》,提出要促进人工智能发展,维护人工智能安全,构建人工智能的治理体系,呼吁各方携手共同推动人…

    1天前
    0