视频版Midjourney又进化了:一句话生成视频,谷歌注资,网友大呼好莱坞已死!-每日观点
2023-06-17 11:18:01 来源:互联网

作者|李禾子邮箱|lihezi@pingwest.com


(资料图片仅供参考)

提到国外的生成式AI大模型,文本生成领域有ChatGPT,图像生成领域有Midjourney和Stable Diffusion,那么视频生成领域有什么?

很多人第一个会想到Runway公司的Gen-1。

Gen-1是Runway在今年2月推出的一款(也是该公司的第一款)由文本生成视频的AI大模型。不过就在几天前,它的迭代版本Gen-2也正式发布了。

在此之前,Gen-2从3月下旬开始已经进行了一段时间的小范围测试。

虽然当时Runway的发言人Kelsey Rondenet说过Gen-2会在未来几周对所有人开放,不过直到6月,这个承诺才算真的兑现了。

所以千呼万唤始出来的Gen-2,到底进化到哪一步了?

真正的从零开始生成视频

在发布Gen-1的时候,Runway专门开辟了一个网页来给大家讲解Gen-1能怎么用,大致来讲主要包括了下面5个功能:

-输入一张图片提示,来让原视频变成你想要的风格;-上传视频+一段提示词,生成你想要的视频(比如让一只拉布拉多变成斑点狗);-输入图片或提示词,来让一段只做了3D建模的视频草稿变完整;-上传一段随意拍摄的视频,自动生成一段有故事感的片段(比如随意摆放的书最后成了一片高楼大厦);-在原视频的基础上,更自由地定制你想要的视频风格(哪怕变出一只现实里并不存在的奇行种)。

发现没有,使用Gen-1的前提是必须先有一个现成的视频。说白了,Gen-1的作用其实就相当于给原视频加了一个更高级的滤镜。

而到了Gen-2,可以说才真正实现了从零开始生成视频的梦想。

从介绍来看,Gen-2比Gen-1多了3个厉害的功能:

-文本到视频:只用输入一段提示词,就能生成一段视频;-文本和图片到视频:输入一张图片+一段提示词,就能让图片动起来;-图片到视频:只用输入一张图片,就能自动生成

此图为输入“The late afternoon sun peeking through the window of a New York City loft”的提示词生成

如果说Gen-1充其量只能当做一个修改视频的工具,那么Gen-2几乎已经能作为一个视频生产工具了——试想一句话生成的一个个视频片段,最后拼到一起就能讲一个完整的故事了……

总之就是只能拿来玩和能拿来用的区别。

虽然目前Gen-2生成的视频依然存在细节模糊不清、形态扭曲等等品质问题,且生成的视频长度最多只有4秒,但它可能是现在视频生成领域最厉害的AI大模型工具了。

当然,从Gen-2开始,也标志着Runway公司正式进入了收费时代:不同于Gen-1的完全免费,Gen-2免费版的视频生成功能有限(试用额度只有105秒,约等于26个4秒视频,且分辨率低、有水印),用户需要每月付15美元(或144美元包年)才能用到它的完整功能。

Runway有啥来头?

Gen-2背后的Runway是一家成立于2018年的年轻公司,一直在研究怎么用AI来提升视频制作效率。

除了TikTok和YouTube上的普通用户,Runway的客户还包括了不少主流影视工作室,比如扣扣熊主持的《深夜秀》就用到过Runway的工具来辅助编辑图像。

它最著名的一次应用应该是去年在中国观众中间非常出圈的电影《瞬息全宇宙》,据报道里面让人印象深刻的面条手,还有石头对话等超现实场景都用到了Runway的技术。

不过很多人可能会忽略的是,早些天被爆出大丑闻的Stable Diffusion也和Runway关系密切。

准确来说是一直被外界视作Stable Diffusion(时下图像生成领域最热门的大模型之一)背后公司的Stability AI爆雷了,媒体列出Stability AI的罪状之一就是,它把Stable Diffusion的10亿代码成果“据为己有”,而它充其量只是给Stable Diffusion提供了算力(出了钱)。

实际上真正为Stable Diffusion出力的是慕尼黑大学、海德堡大学,以及Runway。

Stable Diffusion最早发表在CVPR 2022年中的一篇论文

也就是说,Runway是Stable Diffusion的研发者之一。

Runway在去年还因为官宣发布了Stable Diffusion v1.5版本一度被Stability AI抓着不放,但那次的舆论最终还是站在了Runway这边。

这也是Runway在“成名”以前为数不多的“八卦”。

后来就像大多数的大模型开发公司一样,不再参与Stable Diffusion项目的Runway在发布Gen-1之后,发展速度就像坐上了火箭,并且在本月初拿到了谷歌的投资,距离D轮1亿美元的融资刚过去一个月,累计融资至少已有2亿美元,成为大模型领域的明星公司。

说个更直观的数字,2021年12月对冲基金Coatue花3500万美元投资Runway时,其估值为2亿美元,一年后估值变成5亿美元,再过了半年,它的估值就又翻了3倍(保守说有15亿美元)。

网友:好莱坞is dead

Gen-2的正式发布让不少网友感到兴奋。

在Runway官宣发布Gen-2的推文下,出现了一些普通用户“求教程”的声音:

不过已经有行动力强的用户开始试着用Gen-2生成自己的视频了,不少用户都在Runway推文的评论区交上了自己的4秒钟“作业”。

尽管Runway只是在网站列出了Gen-2的主要功能,并没有教给大家更多Gen-2的玩法,但聪明的网友已经自己学着用Gen-2生成的视频剪辑出了一个有反转的短故事。

比如这个叫“Monster of the sea(海怪)”的48秒故事:天气晴朗、风平浪静的一天,一搜帆船开始还很悠然地行驶在海上,船上的游客惬意地碰着杯喝着酒,可突然狂风大作,船员拿起望远镜往远处望,发现一只巨大的海怪出现在海面,船随着海浪开始颠簸,甚至燃烧了起来,船上的人纷纷跳水弃船逃生。来自推特网友@MHU

甚至有直接用ChatGPT写了剧本、再用Gen-2生成的视频拼成一个故事的。

还有用户拿Gen-2生成的素材剪了一个1分钟的电影预告片,甚至在最后幽默地加了一个戛纳电影节的标志,如果生成的视频质量再高一点,怕不是真能以假乱真。

来自推特网友@Toni Seldr

不过视频质量差、生成的视频时长太短等也确实成了用户吐槽Gen-2的点。

并且在为安卓用户提供App服务的问题上,Gen-2和Gen-1一样也还是没有长进。

当然,更多用户还是对Runway表现出了宽容。有网友评价说,“虽然它有太多的不完美,但有一点可以肯定,整个视听工业都将迎来革命性的改变。”

还有网友更激进地说,“好莱坞已死,任何人都可能做出一部世界级的电影。”

真能取代好莱坞吗?

可以理解为什么广大网友对Gen-2的推出如此兴奋。Gen-2对普通用户的好处是明摆着的——假以时日,文本生成视频技术一旦成熟,将意味着拍电影不再只是大制片厂的专属,任何一个普通人都可以做一部自己的电影。

Runway并没有明确说过Gen-2面向的人群到底是谁。不过我们可以从它推出App以及之前和影视工作室有过的合作等等动作来看,大致猜到有哪些人会用到Gen-2:专业的制片公司,个人工作室性质的独立生产者,以及我们这样的普通用户。

虽然Gen-2看起来对普通用户很友好,但制片公司们会用Gen-2这样的工具也是肯定的。

毕竟大模型不同于过去任何一个热过之后就销声匿迹的概念,它将成为未来又一次深刻改变人类的产业革命,几乎已经是各行各业的共识。

事实上在国内,已经有影视项目开始借助大模型来完成一些工作。比如在剧本筹备阶段,会把分镜头故事板的产出工作交给Midjourney(据说能省下几十万元的成本)。

那假设,有一天Gen-N成熟到也能生成能直接拿去用的完美镜头呢?

或者可以拿大模型在游戏行业的应用做个类比,Midjourney等工具的使用显然已经对游戏公司产生了非常现实的影响:先是出于节省成本的需要砍掉美术外包团队,接着就是在自己人身上动刀,甚至有从业者提到最多有8成的原画师会下岗。

考虑到如今大模型的迭代速度,它的影响真正显现在影视行业也会是迟早的事。

不过我反而觉得,Gen-2大模型可能会淘汰那些影视行业流水线上的“工人”,但却淘汰不了真正的艺术家。

之前听到过一个说法,AI大模型生成的内容里,可能有80%都会是对人类过去经验无聊的重复,但也可能有20%闪光的东西。就比如在中式美学和赛博朋克如何进行融合的问题上,普通创作者可能需要极长时间进行思考,AI却可能生成一个让人意想不到的结果,给人带来惊喜。

这20%是AI存在的意义,剩下的就需要真正有创造力的人去补足。

还有从业者提到过一个观点,AI大模型运用到影视行业的生产,不意味着非专业人士也能轻松上手——如果想借助AI的力量创作剧本,还需要针对剧本公式和故事结构等相关知识进行充电。不具备基础知识的小白即便有了AI这个超级助理也无济于事。

所以回到AI是不是能取代好莱坞的问题,事实上好莱坞可能是最早对新技术的“入侵”有所感知的,就像在今年5月初,数以千计的好莱坞编剧工会(WGA)成员曾进行罢工示威,诉求之一便是抵制在剧本写作中广泛使用AI的现象。

如果有一天Gen-N真的来了,好莱坞导演们可能第一个不答应。

出海活动推荐

印尼,一个人口近3亿的多岛国家,正迅速崛起为全球新消费市场的热门目的地。品玩Global邀请您参与将于6月20日举办的“出海印尼,新消费快速破局之道”目的地出海活动,一同探索印尼独特的文化魅力和多元的商业生态!

*扫描下图二维码,即可报名!

· 文章版权归品玩GenAI/品玩所有,未经授权不得转载。

· 发送关键词转载、合作、招聘到品玩微信公众号,获得相应信息。

· 您亦可在微博、知乎、今日头条、百家号上关注我们。

视频版Midjourney又进化了:一句话生成视频,谷歌注资,网友大呼好莱坞已死!-每日观点

2023-06-17

本赛季过后约基奇生涯场均数据20+10+5 比肩伯德&史上仅此二人 环球今头条

2023-06-17

世界实时:暖宫7味丸——为你的肠道健康保驾护航

2023-06-17

浏阳市凯达昌盛烟花制造有限公司被罚款5万元

2023-06-17

热头条丨黑龙江省七台河市市场监管局重拳整治医疗美容机构行业乱象

2023-06-17

荣昌生物:泰它西普国内SLE Ⅲ期确证性研究初步数据公布 有效率高达82.6%

2023-06-17

法国西部发生5.3级地震

2023-06-17

“博士乘组”已开工!网友:这眼镜咋不飘呢? 天天热门

2023-06-17

全球报道:Uzi对阵Gala!EDG迎战强敌LNG,下路突破成获胜关键

2023-06-17

王斑和曹颖_每日动态

2023-06-17

热点!立方风控鸟·晚报(6月16日)

2023-06-17

世界短讯!辽宁省鞍山市2023-06-12 05:45发布大雾黄色预警

2023-06-17

罗马诺:曼联是否会花重金买门将取决于德赫亚的续约结果

2023-06-17

百度id怎么查(百度id) 焦点信息

2023-06-17

挂件绳编法大全视频_挂件绳编法

2023-06-17

边境牧羊犬脾气(边境牧羊犬的性格)-今日播报

2023-06-16

泰安:打通技能人才培养路径,全市高技能人才总量19.3万人

2023-06-16

早产女婴被遗弃在医院门口,母亲留下纸条写着“我没有能力养她” 精选

2023-06-16

2023年长三角台青三人制篮球邀请赛在浙江开赛-焦点速看

2023-06-16

天天快资讯:疯狂猜成语两个太阳(一个太阳成语疯狂看图)

2023-06-16

小清河复航工程章丘港区整装待发,已达投入使用条件 天天热文

2023-06-16

今日精选:贴吧上不去(贴吧上不了)

2023-06-16

先导智能: 无锡先导智能装备股份有限公司2022年度权益分派实施公告|世界报道

2023-06-16

成米粉了!阿根廷教练组来中国买小米扫地机器人:大包小包拿到手软

2023-06-16

2023珞石全球合作伙伴大会 暨机器人产业转型升级赋能论坛即将启幕!-焦点短讯

2023-06-16

天天热推荐:排列三第2023157期晒票:智慧是勤劳的结晶,成就是劳动的化身

2023-06-16

天津城投“19津城建MTN005B”6月27日付息,利率为4.66% 全球热点评

2023-06-16

广西举办全域旅游大集市 近百地好物“齐聚一堂”_环球看点

2023-06-16

大丰实业最新公告:中标1.34亿元重大项目|环球热资讯

2023-06-16

湖南启动2023年度名品评价 培育世界精品-世界热头条

2023-06-16

史丹利(002588.SZ):部分控股股东拟合计减持不超1.47%股份_环球简讯

2023-06-16

今日观点!2023.6.16 A账户实盘 374

2023-06-16

雪域今朝红似火 滚动

2023-06-16

全球看点:前5个月审批核准固定资产总投资6672亿元

2023-06-16

父亲节送什么手机?OPPO 618福利正当时,Find X6了解一下 最新资讯

2023-06-16

豆粕顺势做多,密切关注降雨情况金十期货6月16日讯,据东吴期货分析,现阶段美豆主产区干旱比例迅速增加,从历史上来看,厄尔尼诺将会带来降雨,75%概率会助长单产-当前观点

2023-06-16

北向全天单边净买入105.46亿元

2023-06-16

天天热讯:“最牛”赛道,又涨疯了!

2023-06-16

美国篮球明星排名前十现役_美国篮球明星排名

2023-06-16

百事通!未婚的心衰患者,预后较差!德国研究

2023-06-16

焦点速读:5118数据分析平台_腾讯大数据分析平台

2023-06-16

阿里拆分京东换帅,2023·618的不平凡之夜 天天观察

2023-06-16

桃源深处有人家礼谊学舍怎么布局 每日头条

2023-06-16

每日看点!辽宁省锦州市2023-06-11 15:27发布雷电黄色预警

2023-06-16

观速讯丨海右人才节之际,济南天桥区推进海内外院士项目对接合作

2023-06-16

联合国工发组织宣布将成立全球工业和制造业人工智能联盟|全球微动态

2023-06-16

庄加一笔是什么字_庄加一笔到底是什么字呢

2023-06-16

泸天化:6月15日融资买入287.29万元,融资融券余额1.86亿元_全球视点

2023-06-16

中医养生:抓住夏日养护心脏好时机_当前时讯

2023-06-16

清除系统lj.bat源代码(清除系统lj) 观焦点

2023-06-16

观点:分公司原负责人在外兼职且持有股份 华金证券收内蒙古证监局警示函

2023-06-16

焦点访谈:“机器人+”加速前行 天天头条

2023-06-16

世界视讯!穆雷示爱丹佛球迷:冠军属于你们 这是一生一世都抹不去的荣耀

2023-06-16

天天热门:赣锋锂业002460,赣锋锂业002460股吧

2023-06-16

今日播报!北京定制公交再上线40个预售班次,涉及通州九棵树等区域

2023-06-16

良品铺子:6月15日获融资买入341.97万元,占当日流入资金比例8.62% 环球今日报

2023-06-16

马路牙子学名是什么_马路牙子学名叫什么? 全球球精选

2023-06-15

世界今热点:【独家】摩根基金原副总经理刘鲁旦加盟中融基金 任副总经理分管固收

2023-06-15

660010,农银汇理策略精选混合660010_世界今热点

2023-06-15

环球即时:科学家揭开大肠杆菌500年来的致命秘密 描绘未来的治疗之路

2023-06-15

模拟量最低点和最高点选择多少MA? 评论区回复:888,免费领取PLC资...

2023-06-15

南银理财珠联璧合理财管理计划5号年内涨11.27%

2023-06-15

苹果手机使用说明书_苹果手机怎样使用

2023-06-15

禁止商拍!故宫博物院发布参观须知

2023-06-15

首创证券:持续聚焦核心城市,高信用房企投资强度有所下滑

2023-06-15

鸿博股份今年搭上“过山车”:股价涨四倍!实控人可能要换两次

2023-06-15

星展银行:若劳动力市场不明显走软,美联储可能加息2次|环球速讯

2023-06-15

异动快报:宁波东力(002164)6月15日13点12分触及涨停板

2023-06-15

天天亮点!今日最新短纤期货价格行情查询(2023年6月15日)

2023-06-15

端午将至粽子“受宠”,山西12315发出消费提示 世界热消息

2023-06-15

环球观天下!2023癸卯年150克彩色金币价格(2023年06月15日)

2023-06-15

近13年总决赛勇士和热火共打进12次 但从未正面交锋

2023-06-15

教育系统推进“互联网+就业”模式 助力高校毕业生更好就业 全球微头条

2023-06-15

恒锋工具6月15日盘中涨幅达5% 环球观察

2023-06-15

【世界新要闻】招商证券:汽车销量和盈利预计逐渐回升

2023-06-15

环球即时:郭艾伦无缘名单引热议 苏群:男篮有谁没谁不是关键

2023-06-15

当前简讯:inaword是什么意思啊 inaword是什么意思

2023-06-15

世界快资讯丨马克龙将于周五再次会见马斯克,谈论特斯拉在法国投资的可能性

2023-06-15

“青春涌动活力泉城”文旅体验生打卡酒博园_焦点热议

2023-06-15

环球滚动:11周以后,四大生肖财运茂盛,日子越过越顺,运势逆转

2023-06-15

中国护照免签国家2021一览表_2021年中国护照免签国家有哪些

2023-06-15

货车轮胎参数规格表_货车轮胎参数规格是什么

2023-06-15

当前头条:为什么学习动物的声音对儿童的语言发展至关重要

2023-06-15

小米48亿被冻结?印度就差生抢了……

2023-06-14

江南高纤(600527.SH):2022年年度权益分派10派1元|当前观点

2023-06-14

被绑在支撑架上挠脚心_被绑住挠脚心_天天快讯

2023-06-14

营收两连降!电费异常!85后实控人是“富二代”!曾涉P2P,风格野?

2023-06-14

美联储利率决议来袭,加息预期扰动金价震荡承压

2023-06-14

全球微速讯:放坡系数是哪个边比那个边大的_放坡系数是哪个边比那个边

2023-06-14

汽车雷达在无人陵园内显示全是人影,这是怎么回事?|天天视点

2023-06-14

小米100W车载充电器特惠:短时间充满62% 电

2023-06-14

撇子英雄(关于撇子英雄的基本详情介绍)_世界快播

2023-06-14

环球今头条!电子招投标可上传“高清图”!武汉市公共资源交易中心全流程电子化招投标又打通一堵点

2023-06-14

什么黑色水果可以生吃?

2023-06-14

腹主动脉夹层的症状表现_腹主动脉夹层的症状 聚看点

2023-06-14

两部门:开展中小企业数字化转型城市试点工作-热资讯

2023-06-14

霹雳刀龙传说合集_霹雳刀龙传说

2023-06-14

杭州市国资委:拟打造“3+N”杭州产业基金集群 聚力推动战略性新兴产业发展

2023-06-14

我国大陆海岸线总长度大约是多少千米_我国大陆海岸线总长度大约是

2023-06-14

东莞创业培训补贴办理资料及流程-环球关注

2023-06-14