soraru Sora颠覆了AI视频,传统漫画和动画从此不存在了?
2月16日,OpenAI发布了视频生成AI产品“Sora”,可以生成长达60秒的连续视频,超过了目前市场上的其他视频生成AI产品。从OpenAI发布的视频来看,Sora生成的视频连贯自然,连背景细节都具有很高的真实感,甚至可以包含指定的情节。
图:索拉一代
《Sora》一经发布,无论从技术还是呈现上都超越了Runway、Pika、Stable Video 等AIGC 视频产品,在技术人士一时间赞不绝口的同时,动画业内人士也不禁感叹。 it:按照传统,动漫的时间已经不多了。
但事实真的是这样吗?
Sora领先在哪?
虽然能够生成长达60 秒的视频只是Sora 的一个小优势,但Sora 代表了视频内容的可靠性、稳定性和一致性方面的突破。与其他AIGC视频工具相比,其他产品的视频制作逻辑仍然是从单个图像动态演变而来,而Sora支持动态摄像机移动、镜头切换、稳定焦点跟踪等,从而创造出更具电影效果的效果。
从输入相同描述符产生的具体效果来看,Pika、Runway、Stable Video、Sora 之间的差异非常明显。这段文字写道:“美丽的雪域东京,热闹非凡。镜头跟随几个人穿过繁忙的街道,欣赏美丽的雪景,在附近的小吃摊购物。华丽的樱花花瓣。在描述“在风中与雪花。”空的视觉印象显然是最丰富的。 《Pica》和《Runway》的制作仍然基于固定的机位和无声运动的理念。 Dynamics仅使用一些元素来证明生成的视频是视频。稳定视频的镜头是移动的,但类似于视频博客中的慢动作片段。
这些突破都是基于“世界模型”(即世界上备受吹捧的AGI)。我们希望人工智能能够从人类和自然中去理解,模拟和推理现实世界的因果关系。因此,Sora并不是一个独立于OpenAI的工具项目,而是一个衍生自其自有GPT和DallE(Vincent Graph Tool)等产品的独立工具。当其他AI相关视频生成产品仍然基于“图像一致”的思路时,Sora完成了“直接从文本生成视频”的进化。
就像别人在学习制作动漫的时候,已经有人直接交出动漫作品了。
根据OpenAI 发布的一份技术文件,炒作是Sora 在视频生成中实现了三维世界理解,而无需使用类似的现有3D 物理引擎。该产品首先将大量视频素材转换为“视觉补丁”,然后将“理解”交给AI。一旦AI理解了一些含义,就足以生成视频模型。 Sora可以理解你提供的提示词,并找到合适的视觉块进行组合生成。这样,Sora减少了生成过程中静态旋转的过程,不需要物理引擎的介入,直接生成视频。
因此,Sora的出现对AI视频生成领域产生了影响,预示着“GPT时代”的到来。
AIGC在ACGN领域的应用
当然,在AI领域追求AGI、创新产品不断涌现的同时,文创领域也正在发生一些变化。抛开AI工具对创作者的影响不谈,在小说、漫画、动漫领域,创作者们也开始利用相关工具来提高创作效率,利用AI寻找创意。在很多ACGN创作者看来,AI的出现让他们将之前耗时的制作流程卸给了AI,更多地专注于磨练和探索故事和角色的细节。
小说:转制视频进行买量
去年,华文集团宣布了所谓的大型创意写作模式“阅文妙台”,但迟迟未公开测试表明,利用人工智能写小说的技术尚未完全成熟。但这部小说确实受益于AIGC 的营销工具。将小说部分情节转化为动态动画的流程得到简化,相关作品的灵活性和个性化也得到了很好的体现。
据了解,部分平台的小说推广团队已经完成了热门小说购买宣传视频的产业化。首先,我们利用GPT、文心一言等大规模语言模型,对小说情节进行提炼,并根据小说的亮点,打造细致生动的短视频脚本和文声图像描述符进行推广。
基于文森特画作的描述符,我们使用AI文森图工具生成大量可以在视频中使用的情节图像,并通过TTS等音频技术读出视频脚本。最后,将视频脚本和情节图形合成并直接放置在视频平台上。由于很多原创网络小说的剧情并不逊色于视频平台的短剧,因此此类购买内容也能吸引大量流量,有转化为付费读者的潜力。
漫画:上色和创意辅助
由于漫画有一定的风格化和创作障碍,目前市场上还没有产品可以完全从故事生成漫画。不过,上色技术已经成熟,国内很多工业漫画已经用这种技术来替代原来的上色临时工。去年我就说过Style2Paints这个专门用来上色的工具,加上日益成熟的ControlNet,可能会让很多漫画/插画行业的创作者“偷懒”。
来源:UP插画大师晓光
此外,许多漫画艺术家希望将他们的草图输入人工智能绘图工具中,以进行配色和二次创作。 AI 工具可以帮助您找到更好的构图和颜色选项,或将手动着色与AI 相结合。一致的艺术风格,保持彩色作品的对比。这些人工智能辅助技术的进步正在开始加速漫画创作进程,同时也为漫画艺术家提供了更多的创作空间来探索新的故事讲述和视觉表达技术,以吸引更广泛的受众。
动画:人设、3D模型人物生成
在动画领域,AIGC技术带来的直观感受可以用一句话来概括:“雷声很大,雨滴很轻。”一些视频平台和内容公司陆续宣布推出利用AI创作的电视动画和院线电影,但从目前的进展来看,还处于早期阶段。
事实上,一些AIGC工具已经悄然进入动画产业化领域。关于3D模型的批量生成,一些3D动画公司已经尝试开发动画制作引擎的相关插件,以方便将大量角色插入大场景组的肖像情节中。一些公司开发了自动化交互。与非主角批量互动的功能。该功能允许动画师快速完成多个大场景的动作场景。
基于AI生成3D模型的厂商也出现了,发布了Tripo等产品,可以快速生成带有纹理的3D模型,并快速导入到原始动画管道中进行二次编辑。这些产品减轻了动画师在角色和道具建模时的压力,提高了动画制作的效率。
另外,一些动画公司使用Stable Diffusion等工具来利用Vincent绘图工具的效率,例如使用某些大型模型或Lora模型生成角色的三视图来进行角色设计,开始加强。此外,动画公司使用人工智能绘图工具来创建动画场景。这不仅提高了效率,还产生了更多的视觉风格,为观看者提供了不同的体验。
这些技术的应用将帮助AIGC不仅为内容创作者提供强大的支持,还将加速整个数字内容产业的进步,开辟新的创作可能性,创造新的商机,它展示了一切皆有可能。 Sora的到来或许会给AI在二次元领域的应用带来更多想象和可能。
Sora能提升ACG内容产能吗?
然而,市场上仍然没有完全适应漫画和动漫行业的开放产品集。此外,随着AI加速AGI的实现,国外娱乐内容公司的工会和创作者对AIGC表现出谨慎和抵制,但国内动漫相关公司人力资源有限,无法投入自主研究。关于人工智能。
目前,AI的GPT奇点时代已经过去一年多了,但AI的到来对于漫画、动画这个高度依赖创意和经验、持续性需求强烈的行业来说,消灭劣币还不够。不过,还是加速了部分原本劣币的流出。
对于动画行业来说,目前创作者似乎很难让Sora来接管部分创作过程。首先,空能否在60秒内保持一贯的风格还有待观察。 OpenAI发布的视频显示,即使用特定的参数文本修改需求,Sora仍然无法保持完美和谐的风格。此外,虽然Sora 可以生成高达1080P 的分辨率,但当前版本仍然存在局限性,因为视觉效果尚未得到很好的理解,并且违背现实世界逻辑的动作是概率生成的。有潜力、有进步的空间。
图:索拉一代
但漫画行业可以通过Sora或类似的产品在短视频市场取得一些突破。 《动感漫画》或将迎来AI新阶段。根据Sora自述的“世界模型”的使用情况和最终结果,它已经配备了效果表达,可以从静止图像中创建具有空间感、三维度和镜头感的内容。这样的突破对于漫画行业来说肯定是有帮助的,一些有凝聚力的漫画内容还可以利用这个特性实现免费动画,更容易占领当前短视频驱动的用户市场。
当然,无论是去年的中游 稳定扩散热潮,还是ChatGPT等通用AI产品的流行,都不能让一直在降本增效中默默追求的动漫行业在制作上实现颠覆性突破。 不能。容量。即使Sora带着OpenAI的光环出来,那也不会有太大改变。坦白说,国内动漫产业可以通过AI实现内容突破,但现实中控制权并不在创作者手中,而是像Sora这样的AI产品改造二维世界。真实世界。
图:索拉一代
有一天,当人工智能工具不仅能理解二次元内容,还能理解导演和编剧时,也许动漫行业将进入属于自己的奇点时代。从近两年AIGC和OpenAI相关产品的发布速度来看,这一天或许并不遥远。对于动漫创作者来说,不必太担心AI工具造成的人力资源过剩,如果能跟上AI工具的进步并正确掌握如何操作它们,就能够避免人力资源过剩,认为这种情况发生的可能性较低。排除。
至少目前来说,AIGC产品还只是一个辅助工具,运营商对内容本身的理解以及对工具的掌握程度将最终决定所制作内容的质量。在那之前,无论是通过制作更好的内容来证明人类创作者的价值,还是采用AI工具并成为第一批熟练使用AIGC的人才,一切都为时已晚。
一、玩家发文怀念19年的魔兽时光,引发大家共鸣 一位海外服玩家在reddit论坛上发表了一篇总结自己19年魔兽生涯的文章,引起了很多魔兽
2024-02-23游戏工作室“Studio Araya”于近期宣布,游戏新作《Project KV》将中止开发。 《Project KV》于9月1日正式公开,并公布了
2024-09-11大家好,欢迎来到「17173游戏早茶」,这里是您每天游戏资讯的起点站,如一杯提神醒脑的早茶,我们为您精选游戏界的最新动态、热辣话题以及不容错过的独家报
2024-09-04Steam在日前发布了8月玩家数据调查报告,根据报告内容中语言类别玩家排行中,简体中文玩家占比高达35.3%,是目前所有语言中,玩家数量最多的群体。
2024-09-04《最终幻想14》朔月秘话第二话「影子的记录」公开! 在《最终幻想14》的主线剧情中没有讲述过的故事与思念将通过游戏设定特别读物「朔月秘话」向大家呈现。
2024-09-04欢迎来到《17173晚间游戏快线》,您的每日游戏资讯直通车! 在这里,我们为您精心筛选最新鲜、最热门的游戏新闻和更新,将在每天日落时分准时送达,一起来
2024-08-31近日,开发商 Pearl Abyss 揭晓了关于开放世界动作冒险游戏《红色沙漠》在科隆游戏展的试玩细节信息。该作会于 8 月 21 日至 25 日在科
2024-08-15万代南梦宫旗下的新游《转生成史莱姆 坦派斯特开拓谭》,是根据著名人气动漫小说改编的,在 8 月 8 日也就是今天正式发售,登陆 PS5/PS4/Xbo
2024-08-10-
分手后 “魔兽在,我便在”!玩家短文引全网共鸣,记者出书揭暴雪老底 2024-02-23
-
从官宣到解散仅用了7天!《蔚蓝档案》前团队新作《Project KV》中止开发 2024-09-11
-
游戏早茶:如果苹果16真的不支持微信?《和平精英》上线新版本 2024-09-04
-
Steam发布8月数据:因《黑神话》发售,简中用户占比高达35.3% 2024-09-04
-
《最终幻想14》朔月秘话第二话公开!追忆晓月秘辛! 2024-09-04
-
晚间游戏快线:《黑神话》团队规模远低预计!周杰伦终审败诉网易《天下3》 2024-08-31
-
开发商 Pearl Abyss 在科隆游戏展揭晓开放世界动作冒险游戏《红色沙漠》 2024-08-15
-
著名人气动漫小说改编游戏《转生成史莱姆 坦派斯特开拓谭》将在多平台发售 2024-08-10
-
马里奥首度缺席?除了升错国旗外,巴黎奥运会还有这些游戏乐子 2024-08-05
-
XX歪了?我不玩了!抽卡游戏是如何把自己逼上绝路的? 2024-07-30