Sora大片真相：人工特效参与，被指误导大众 https://www.qbitai.com/2024/04/138328.html 鱼羊 啊？ Sora火爆短片《气球人》，也「造假」了？ ？ ？ 背後艺术家团队的最新揭秘，可谓一石激起千层浪： 原来， 视讯画面并非完全由AI生成，其中有大量视觉效果需要人类後期实现 。 像： https://www.qbitai.com/wp-content/uploads/replace/ce596c9de49429e0a84241b2adc33966.png 这下网友不干了，合着大家伙儿跟OpenAI玩真心，OpenAI背後却耍起心眼子来了： 他们含糊其辞，就是希望观众认为短片完全是AI生成的，这是不是有点不诚实了啊。 这不是人工智慧生成的视频，而是使用了一些AI技术的视频。 还有网友直接开喷：误导行销！ 这是误导性行销！ 究竟是怎麽个事儿，咱们还是具体捋一捋。 揭秘Sora大片工作流程 尽管OpenAI一开始就介绍了，《气球人》这样的短片出自艺术家团队之手，他们只是把 Sora开放给了艺术家使用，但官方并未提及短片具体是如何制作而成的。 现在，《气球人》背後的艺术家团队Shy Kids自己来了个大揭秘，内容包括： 影片片段一致性如何实现 他们如何处理Sora生成的影片素材 Sora生成影片的限制及後制 影片一致性 《气球人》中主角形象的一致性可谓惊艳众人。 但其实吧，根据Shy Kids团队中负责後制的老哥Patrick Cederberg（简称老帕）透露， 想要实现这种前後一致并不是写写提示词就能成的。 Sora并没有提供工具，来帮助实现不同镜头之间的主体一致性。 也就是说，就算提示词 都是一样的，两次运行的结果也会有所不同。 他们的做法是，尽可能详细地对主角形象进行描述。 解释角色的服装以及气球的类型是我们解决一致性问题的方法，目前Sora还没有整合 适当的功能来实现此类控制。 即便如此，团队在用Sora生成影片素材时还是遇到了不少这样那样的问题。 例如，提示词里明明写了气球是黄色的，但Sora生成的片段里气球可能变成红色。 视讯素材处理 一致性之外，老帕提到，在时间轴方面，Sora允许使用者修改关键影格。 但这种时间控 制并不精准，无法保证一定能达到预想的效果。 另外，想要实现这个镜头： https://www.qbitai.com/wp-content/uploads/replace/93608b16f20522e8344f845d3e2d9955.gif 即把镜头焦点从牛仔裤一路上移到气球头，也得人类自己後期裁切平移画面，因为Sora本 身不会渲染这样的镜头：它总是倾向於把焦点集中在气球头上。 老帕也谈到，他们在写提示词时也遇到了一些问题： OpenAI在让艺术家试用Sora前，并没有考虑到真正的电影制作人是如何思考的。 简单来说，就是Sora对摄影术语（如跟拍、平移等）的理解有限。 老帕认为，这一点上 Sora不如Runway。 值得一提的是，尽管Sora原生支援生成1080p视频，但老帕他们实际上生成的素材都是 480p的。 他们是在後期使用Topaz等工具对视讯素材进行了超分处理。 生成速度方面，根据老帕的回忆，每次大概需要10-20分钟的时间。 影片後期 接下来，就到了网友们反应最强烈的部分──後期。 前面已经说到，Sora本身也解决不了不同影片片段里一致性的问题。 除了气球不一定符合设定，或许是因为训练资料的原因，Sora也喜欢自动为气球加上 奇奇怪怪的人脸。 给主角生成其实不需要的假人头。 Sora还坚定地认为气球得带根绳。 总而言之言而总之，这些都需要老帕上手丢到AE里，进行後期处理。 另外，尽管Shy Kids发现「35mm底片」这样的关键字很好用，能让Sora生成的影片画面风 格更一致，但艺术家们仍需要为最後的成片做调色，为画面添加颗粒和闪烁效果，以使整 部影片画面更协调统一。 老帕也提到了一个有趣的细节： Sora很喜欢慢动作。 我不知道为什麽，但有很多镜头看起来都是0.5倍速和0.75倍速。 因此我们需要对大量画面进行调速，免得影片看起来像是大型慢动作项目。 那麽，Sora生成的影片素材有多少最终被用在影片里了？ 「数学很差」的老帕估计了一下，大概是 300:1 。 音讯方面，Sora目前还不能产生声音，因此旁白和音乐都是团队自己加上去的。 版权 为了不侵犯版权，OpenAI给了Sora一些限制。 例如，你不能把提示词写成“35mm胶卷，未来太空船中，一名男子拿着光剑靠近”，那样 Sora会直接拒绝生成，因为这画面太像《星际大战》了。 喔对，像什麽「阿罗诺夫斯基式镜头」和「希区考克变焦」也是不行的。 3人团队2周制作完成 该说不说，在外界卷起风波之前，Shy Kids团队对於Sora的表现还是很满意的。 毕竟，制作《气球人》这样一个高品质短片，最後只用了他们仨1.5到2周的时间。 团队认为，现在，对於专业的电影团队来说，Sora当然还有很大进步空间，但对於大部分 人而言，Sora已经足够惊艳。 用老帕自己的话说： 我觉得人们应该将Sora变成工作流程的一部分。 不过，如果他们不想跟AI沾边，也没关系。 对於这样的观点，也有不少网友表示认同，认为Sora这样的影片生成AI，是对现有工作流 程很好的补充。 Adobe把它们整合进软体里，就是一个很不错的主意。 但，「我厌倦了OpenAI们的精美Demo行销」。 还有网友不满的点在於，爆红的「人工智慧生成影片」背後有大量的人类工作，他们投入 数百个小时工作，却被AI掩盖了真实的价值。 那麽，这事儿你怎麽看？ 参考连结： [1]https://www.fxguide.com/fxfeatured/actually-using-sora/ [2]https://twitter.com/bilawalsidhu/status/1783544598259794046 --

※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 114.38.27.129 (台湾) ※ 文章网址: https://webptt.com/cn.aspx?n=bbs/AI_Art/M.1714571826.A.E9F.html