三代悟空同场演出,死水跳舞。「科目三」,AI 新的视频顶流是造梗神器。

2024-08-31

三个「悟空」同场,竟是为了比拼舞技。


小丑,五条悟跨次元联动,一对一复制苹果高管的跑酷。



当你第一次看到劣势,然后看到抽象,你可能会充满问号,怀疑创作者的精神状态,但你也可以选择加入创作,证明你可以更鬼。


两个视频都来自一个视频。 AI 工具:Viggle。只需一张人物照片,一段动作视频,Viggle 可以生成各种整活视频。


最近,Viggle 硅谷知名投资机构上榜 a16z 全球 AI 商品 排名第一的Top100 21 名。


一种不严肃甚至有些粗糙的 AI 为什么工具在大量商品中脱颖而出?


一个视频,一张图片,几十秒魔改科目3


Viggle 使用起来非常简单,新客户可以先从 Mix 开始感觉功能,只需输入2个。「提示词」——录像,提供动作;照片,提供角色。


在这些照片中,最好是全身照片,背景干净,视频可自行上传,也可使用。 Viggle 的模板。


Viggle 有丰富的视频素材,唱跳,足球,影视,游戏,...


本人选择了《楚门世界》的视频资料,上传了黄仁勋意气风发的《时代》杂志照片。


然而,十秒钟就完成了。但是人像吃了菌子,脖子以上的六个亲戚都认不出来,身体边缘有明显的抠图感。金凯瑞的经典表情没有再现,但动作是跟着做的,所以说这部分不到位。


如果自己上传视频,注意时间不要超过 30 秒,人物动作清晰,无遮挡,光线也要好,画面不要太暗。


我选择了一段曾经席卷抖音的海底捞舞蹈。「科目三」,让死水跳起来,30 秒输出结果。


是保留原有背景,还是改为绿色背景或白色背景,供你选择,尤其是绿色背景,非常方便后期处理。为了防止红色和绿色的视觉冲击,我选择了白色背景。


扭腰、摆胯、摇花手一点也不违反死侍的人设,「科目三」动作本来就很搞笑,塑料质感让姿态更加曼妙。


如果只有霍霍一个角色,那么如何满足众多网友看热闹不嫌大的需求呢?8 月,Viggle 推出了 Multi 功能性,顾名思义,可以一次更换多个角色。


此功能目前无法自行上传视频,只能以模板为基础,功能引导良好,让您明确哪个动作对应哪个角色。


自己和川普的马斯克亲自传出了自己。 AI 舞蹈视频,我们也可以使用 Viggle 让《火影忍者》相爱相杀的鸣人和佐助演奏同样的舞蹈。


也就是产生的结果有些让人无语——人物不仅有无缘无故的果冻质感,而且背景也不是一层。


假如说 Mix 和 Multi 该功能可制作鬼畜短视频,Move 其功能非常适合魔改表情图,此时可上传一些半身照,将魔改的重点放在脸上。


我上传了「外国女人」表情图,然后上传了《美国精神病人》的视频短片,看看是否可以模仿克里斯蒂安·贝尔的精髓。


「外国女人」复制演员的表情,露出尴尬但不失礼貌的微笑,明明是和华尔街雅痞一样的表情,却多了一丝戏谑的气质。


简而言之,Viggle 很有趣,也很简单,可惜效果不够好,动作可以模仿,表情也可以复制,但是人与背景往往格格不入。


另外,找一张合适的全身照也很难,如果非要换成半身照,下半身由 AI 补充,看起来可能有点。「半身不遂」,不要问我怎么知道的。


那实际上是马斯克


但 Viggle 有 iOS 和 安卓roid app,有网页版(https://viggle.ai/create),也能在 Discord 使用,每天可以免费生成几个视频,那么耐心一点也不是没有可能。


Viggle 本人也非常清楚产品的粗糙,Viggle 创始人 Hang Chu,将现在的 Viggle 视作「prototype」(原型),先让大家用起来,商品可以用,有用,边用边迭代,不是坏事。


退一万步说,这种钱不够的粗制滥造风格在短视频中也有一种独特的味道,就像以前一样。 B 学了三年动画系列,站得很火。


官方自己也带头整理自己的工作。《电锯人》的电次、帕瓦、玛奇玛跳洗脑神曲《愿意服务》,人物有明显的绿边,但多看几遍就会登顶。


使表情图移动起来更有创作空间,但也想吐槽,欧美互联网对表情包的使用还是太初级了。



工具简单,态度严肃,待遇严肃。


Viggle 爆红,靠的是自来水顾客的力量。


今年 4 月,Viggle 一段视频出人意料地火了-说唱歌手 Lil Yachty 被小丑取代,没有任何违和感,走姿,踢脚,转身,都像小丑本丑可以做的动作。


尽管连 Viggle 我没想到,但事实证明,整个生活的内容是最容易的。 TikTok 等待短视频平台火起来。


Viggle 在 TikTok 文火,目前 #viggleai 包括 3.5 万只视频,#viggle 包括 4.6 万只视频。


光是这个猫跳舞的视频,就得到了 120 万赞,虽然有点吓人,但也有网友欲罢不能,说根本看不下去。


只有社交产品 Discord,Viggle 已积累超越 430 万用户。


以前许多成功的人 AI 商品都是从 Discord 开始,建立社区,测试功能,积累客户,然后拥有自己的独立网站,比如 Suno 和 Midjourney。


Viggle 能够火起来,主要有两个原因,一是简单易用,二是有趣。Viggle 创始人 Hang Chu 也在 a16z 在采访中强调了前者。


以严肃的技术为支撑,用户可以轻松完成有趣的创作。Hang Chu 告知 a16z:


We are pretty serious about being silly. (我们非常认真地对待搞笑。)


Viggle 技术路线,以及其他视频生成 AI 不同的是,它是一种「可控制的视频生成」的工具。


「可控性」,有许多可以说 AI 生成工具的死穴。


Viggle 训练了 3D 基本的视频模型「JST-1」,了解物理规律,能创造出更加逼真的角色动作和表情,让用户指定某个角色做什么动作。


尽管 Viggle 角色会有这样那样的东西吗? bug,但是它非常好的一点是,即使我们上传的照片只是一个正角度,模型也会尽最大努力生成一个完整的。 360 测量身体视图。



相比之下,很多文生视频 AI 基于像素,可控性差,常产生不符合物理、不切实际的角色动作。


但是这两条路线各有优势。基于像素的扩散模型,优点是可以用任何视频进行训练,生成任何内容。如果训练规模达到一定水平,可控性可能会逐渐显现出来。而且 Viggle 走路时,首先要尝试处理可控性,让工具像图形引擎一样精确可控,然后在此基础上扩展。


目前 Viggle 只有创造角色,但是未来,Viggle 计划引入更多的功能,包括生成物体、角色和物体的交互,甚至整个场景。


AI 带来新的内容消费,每个人都可以创造「平行宇宙」


AI 照片生成工具曾是一枝独秀,但今年,使用 AI 创作的方法越来越丰富。图片,音乐,视频,AI 都能整活。


和 Viggle 有一些相似之处,就是阿里通义千问 app 的「全员舞王」。


因为今年早些时候「科目三」虽然火了一把,但是自由度比 Viggle 差一点,主要是基于模板。另一方面,这也使得游戏的门槛更低。


现在通义千问还有「全员唱演」,可换头表情包,唱热歌等。


从 Viggle 到达通义千问,AI 为普通用户带来全新的内容消费形式——基于自己喜欢的角色和视频,让普通用户参与创作。


即使不用站在前人的肩膀上,自己上传自己的视频和图片也没有什么不好。


Viggle 主要的创作方法是基于明确内容的二创,但实际上我们也可以自由发挥。现在,Viggle 有以下几种玩法。


  • mix,角色图片 动作视频。
  • animate,角色图片 动作提示词。
  • ideate,角色提示词 动作提示词。
  • stylize,角色图片 人物风格化提示词 动作提示词。

最简单、最常用的就是 mix,但在 Discord 我们可以使用它 animate 功能性,上传人物图片,动作只需通过文字提示指定,无需上传视频。


在萨菲罗斯上传一张“最终幻想”的照片,输入文字提示:ballet, leap into the air and twirl(芭蕾,弹跳,旋转),选择绿幕作为背景。


我闭着眼睛旋转跳跃...


可以看出,这一功能发挥脑洞的空间很大,不需要局限于视频模板。


遗憾的是,同样是非常自由的。 ideate 和 stylize 功能,在网页版本和 Discord 还没上线,还是「coming soon」的状态。


内容创作者和普通用户用户 Viggle 整个活动,专业的动画工程师,游戏设计师也可以在构思和预制阶段使其派上用场。


Viggle 是一类 AI 创造性产品的代表- AI 更加可控,更加有趣,更加个性化,我们可以让自己和自己喜欢的角色参与到某个场景中,诠释许多样子,延伸许多可能性。


因为我们喜欢一个场景,一个片段,所以我们可以把自己放在其中,重现它,重塑它。


在某一时刻更加与我们自己有关的时候,那就是我们每一个人。「瞬息全宇宙」 。


本文来自微信微信官方账号“APPSO”,作者:发现明天的产品,36氪经授权发布。


本文仅代表作者观点,版权归原创者所有,如需转载请在文中注明来源及作者名字。

免责声明:本文系转载编辑文章,仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布,请及时与我们联系进行审核处理或删除,您可以发送材料至邮箱:service@tojoy.com