26uuu电影 2024服贸会|生数科技,求解视频大模子生成主体不一致问题

2018年最新国产在线视频
狼国成人
栏目分类
26uuu电影 2024服贸会|生数科技,求解视频大模子生成主体不一致问题
发布日期:2024-09-16 18:28    点击次数:83

26uuu电影 2024服贸会|生数科技,求解视频大模子生成主体不一致问题

  “当咱们向AI输入一条辅导,让它生成一段视频时,本色上26uuu电影,中枢诉求是但愿AI匡助咱们完成一个完整的叙事。要已毕这个主义,需要让中枢元素上保抓合股和可控”,在近日召开的2024年中国海外就业贸易来去会(以下简称“服贸会”)上,生数科技董事长兼CEO唐家渝给出责罚决策:视频大模子Vidu的主体参照功能,即能已毕对率性主体的一致性生成。为了作念到这极少,业界曾尝试“先AI生图、再图生视频”等顺次,但主体参照功能不光能减少责任量,还冲破了分镜头画濒临视频内容的界限。时候的突破让视频大模子买卖化有了更大的念念象空间。

  诳言语模子盛行时,生数科技就对准了多模态赛说念,并在2024年1月上线了文生视频的智商。按照生数科技的遐想,视频智商需要更万古长、更高一致性去发展,但Sora的亮相让这家创业公司的遐想提前。

  4月底发布Vidu,营救一键生成16秒高清视频,6月营救一键生成32秒视频,同期生成音效,并从单个生成的视频中重构出4D视频。7月底,Vidu谨防面向宇宙上线,洞开了图生视频、变装一致性功能以及最长8秒的视频生成智商。

  这次,唐家渝在2024年服贸会上要点先容的是Vidu的最新功能“主体参照”。所谓主体参照,即是允许用户上传率性主体的一张图片,Vidu 就冒失锁定该主体的形象,通过描述词率性切换场景26uuu电影,输出主体一致的视频,其中“率性”是要道词,即岂论是东说念主物、动物、商品,也曾动漫变装、造谣主体,皆能确保其在视频生成中的一致性和可控性。

  北京商报记者了解到,在该功能上线前,视频大模子对已毕这一主义并不是毫无责罚决策,“图生视频”和“变装一致性”等智商也可作念到。

  以先AI生图、再图生视频的顺次为例,不错通过AI画图器具如 Midjourney 生要素镜头画面,先在图片层面保抓主体一致,然后再将这些画面转动为视频片断并进行裁剪合成。

AV女优

  但问题在于,AI 画图的一致性并不完好意思,时常需要通过反复修改和局部重绘来责罚。更进军的是,本色的视频制作过程中波及宽阔场景和镜头,这种顺次在处理多组分镜头的场景时,生图的责任量雄壮,能占到全经过的一半以上,且最终的视频内容也会因为过分依赖分镜头画面而穷乏创造性和活泼性。

  Vidu的“主体参照”功能通过“上传主体图+输入场景描述词”的格式,平直生成视频素材。这一顺次大幅减少了责任量,还冲破了分镜头画濒临视频内容的界限,让创作家冒失基于文本描述,创造出画面丰富、活泼多变的视频内容。

  中央播送电视总台导演、AIGC艺术家石宇翔共享动画短片《夏季的礼物》创作经落后暗示,与基础的图生视频功能比较,“主体参照”功能开脱了静态图片的拘谨,生成的画面更具感染力和目田度,让创作的连贯性大大普及。同期匡助他省俭了七成左右的生图责任量。

  北京商报记者魏蔚26uuu电影