发布日期:2024-10-09 05:02 点击次数:81
中传戏文.
中国传媒大学戏剧影视学院戏文系
对于AIGC赋能影视创作的想考
作者
戴清,中国传媒大学戏剧影视学院训诫、中国文艺指摘家协会视听专委会文告长
复旦大学中语系影视好意思学系列行动之一“AI艺术实施与异日影像发展”学术论坛,于2024年4月5日举行,本文为我院戴清训诫参加这次学术论坛发言,经整理如下:
感谢杨俊蕾训诫的邀请,十分运道能参加复旦大学中语系影视好意思学系列行动之一“AI艺术实施与异日影像发展”学术论坛。
没料想俊蕾刚才提到的Professor X竟然是艾伦·图灵先生,由这位东说念主工智能之父致辞,你们这个创意着实太棒了,It's amazing!给我带来很大的冲击。图灵奖是数学、规划机类的诺贝尔奖,以数学天才、东说念主工智能之父图灵之名定名,图灵的一世是传奇的,诚然只活了40多岁,但他对东说念主类的孝顺却是极高的,以他和蔼充沛的致辞开启咱们的论坛,着实是既稳妥又充满深意的。
“AI艺术实施与异日影像发展”学术论坛海报截图
刚才听俊蕾训诫先容今天的发言递次是由AI信赖的,让我这个第一位发言东说念主稍感快慰。起初我合计是因我虚长几岁,让我先发言,颇为登高履危,因为在AIGC这个限制我着实是一个后学者,在此就我方新近调研、学习的少量心得向诸位同业群众和同学们文告,意在抛砖,以引后续真合法众的灼见真知之玉。AIGC自身是一个新限制,咱们全球也都在学习探索中,我不揣大意以一孔之见跟全球交流、求教,也请群众和同学们多多月旦指正。
AIGC,在编造生成上具有通用性——文生文、图生图、文生图……具有极大的通用性。这种通用性在目下实践天下东说念主工智能的成立应用中还难以完了,比如东说念主工智能不错在餐厅中穿梭送菜,却离研制出管家保姆这么高档的机器东说念主差得很远;在虚实联结——如东说念主工智能与实践战斗的物理界面层面,更是难以达到其通用性,如雷达、监控等东说念主工智能覆盖都有其虚实联结濒临的较大局限性。最难的则是统统硬件的成立吧,如芯片,其通用性就统统不可与AIGC编造生成式的全面着花等量皆不雅,这亦然考量AIGC已有获利的一个基本参照。有打趣说东说念主们原来指望AI作念保姆管家,以便自若东说念主们,有欢畅去写诗画画。没料想偶合相背,AI小冰们在艺术创作上一发不可收,而管家保姆的琐碎烦杂职责却仍由东说念主类充当。其原因恰是由于管家保姆需要作念太多融合衔尾的职责。
鬼怪韩剧在线播放图片来自集聚巨屌 av
AIGC中ChatGPT期骗天然话语,目下东说念主们用天然话语就能向 AI发问,不再必须经由表率员的代码指示操控,这是高大的期间飞跃,当它应用到日常生涯中,必将是全面浸透性的。对编剧职责来说,也将成为一个极大的赋能与助力,东说念主机协同、“东说念主爱”(AI)合一将成为新的创作趋势,AIGC不仅能普及职责着力、裁汰成本,如这句英文所说的:AI-Generated Everything. (AIGX),也将极地面改变目下、异日几代东说念主的莳植模式,这个冲击是前所未有的。惊骇、掩饰莫得效,只消直面它,像AI同样进行深度学习,天然咱们的学习速率信赖赶不上AI,就像东说念主跑不外汽车同样,是以更需要咱们了解和把捏AI thinking(想维),善于给它发问题,骨子上漠视问题历久比回应问题更难更迫切。
图源:该论坛会务组依照发言题目和嘉宾信息,使用DALL·E生成
同期,动作敦厚,咱们要向学生学习,在对ChatGPT、Sora等AIGC模子、软件的学习把捏上,年青一代更有上风,敦厚在教悔中也要匡助学生去修正、完善和证明AI提供的谜底,骨子上AIGC带来的变化将挑战进修的传统教悔、发问与考查形状。AIGC在知道上就怕候是有颓势的,有学者将其称为“新常东说念主”,即常识奢靡,又时常泄漏其知道之鄙俚,同期它也具有创造力智者的一面。它对东说念主们的赋能是一定的,比如《似锦》电视剧播出时,我通过百度成立的国内版ChatGPT4.0——文心一言发问,请GPT进行指摘。它啰里哆嗦了一大通,这里我只截取了一小段。从中,咱们发现它的话语中相干性很强,但因果性和准确性都很不及,深入玄虚进程、特色把捏都差得较远。但咱们不成忽略此时GPT还莫得读过原作,也不了解电视剧情节全貌,也即是说它还不占有新的数据和信息——专科大数据语料投喂不及,GPT防碍锻真金不怕火、深度学习不够,包括它的智能进程还依赖于我这么一个使用者/用户对专科限制的厚实进程以及使用AI的深度,昭彰GPT还有发掘的后劲空间。
AIGC的创造力是令东说念主刮目相看的,它不错给咱们启发,帮咱们翻开一扇窗,进入一个轩敞的寰宇。AIGC的中枢竞争力是它遒劲的学习能力和种种的学习形态,如所谓监督学习、无监督学习、强化学习和深度学习。在此,各种学习,并不是一个个单纯的名词,它意味着不同的算法、算力和大数据。
图片来自集聚
AIGC模子包含着宽敞的子宗旨和经过表率,如多头自注眼力、注眼力权重、位置编码……如ppt中列出来的这些名词。动作非期间东说念主员,咱们可能不了解其创造机制和数学、规划机旨趣,然而咱们已能够期骗这种谣言语模子,初步了解其编码器与解码器的功能,包括上千亿 token的作用,以过甚奖励模子对AIGC选拔性的信赖,以及通过常识库、小样本、想维链的提醒,去减少AI给出谜底的空幻与不信赖性。这方面,与围棋比赛中东说念主工智能AlphaGo不错驯顺李世石、孔捷等海外高东说念主的光芒相对比,AlphaGo更带有信赖性与单向维度,而AIGC则更倾向不信赖和多维度——尤其是复杂叙事的生成。因此AIGC不错为咱们的创作赋能,而不会像围棋东说念主工智能AlphaGo那样完胜东说念主类。
图片来自集聚
在创作上,编导演肃肃的是从0到1的计议、创意表率,东说念主的灵感和创造力是第一位的,而从1-N 中的部分则可由AIGC肃肃实操,同期编导们要不休修正它的空幻,就怕候GPT也会正经八百地瞎掰八说念,就怕它连影视剧的东说念主物关系都会弄错。你指出来,它会相称谦卑羊左之谊歉,但后头可能照旧不可幸免空幻,其实这和它掌捏的语料不及关说合。
异日的影视创作中,东说念主机融合是趋势,如编剧团队中有单干,老到编剧肃肃提供0到1的计议和创意,年青编订则主要承担和AIGC的调换职责,互相融合,团队的着力会大大普及。目下GPT4.0版依然能够承担影视剧计议写稿脚本之用,较快的话,一天约略能够达到四五万字——即长脚本三集多的体量,如果几个团队同期创作的话,着力多高,全球不错推想。天然,这个前提是编剧、编订创意调换水平都很高,对GPT的锻真金不怕火和高质料语料实足多。如果只追求着力,也可能只出产出一堆垃圾。当下ChatGPT的写稿形状,有一种被称为“静态酌量”模式,即把悉数故事线都计议出来,再生成故事,即是说前期的职责很玄虚很塌实,情节的连贯性和丰富性也就更强。
图片来自集聚
实施出真知,面对新事物,最好的学习方法即是去尝试,因此我也进行了少量儿小实施——我不是编剧,仅仅试着漠视一个创意,稍后详谈。
一般而言,ChatGPT在写稿、分析脚本方面有许多优长,要津在于编剧需要像表率员同样去了解它的想维特征,ChatGPT需要深刻的要求,也需要细分要求,还需要不休的细化深化、纠错补充,而不是一蹴而就。目下经典叙事结构比如金字塔结构、铁汉旅程结构期骗得较多。GPT不错针对脚本的东说念主物、情节、结构、节律、格调等方面进行创作。不仅写稿高着力,还不错仿效多种文风,比如它的演义写稿,不错效法马尔克斯、玛格丽特·杜拉斯等作者的话语格调;悬疑推理影视剧创作,不错仿效阿加莎·克里斯蒂戏剧模式,以及变换视角呈现等等,这些都是AIGC的坚强。这方面如果由编剧个东说念主来完成会相称耗时费脑。其他经过职责,如制片需要字据某演员档期,纠合安排拍摄该演员的戏,不错让东说念主工智能(骨子上excel统计也不错部分完成)去调程序排统筹,规划详确到各场戏波及哪些场景、和其他演员的敌手戏等。在惩处上、创作上,东说念主工智能的都可能推崇遒劲作用。
图片来自集聚
为深刻解、测试AIGC的创作能力,我在文心一言上想象了一个小创意(再次强调,我不是编剧,但咱们每天都在看故事、琢磨故事),故事创意围绕影子爱东说念主张开:每个东说念主都有影子,故事当中的主东说念主公——年青东说念主柳丛的影子是有灵魂的,她无条款地爱着柳丛。最终,影子爱东说念主为了保护柳丛而隐没了。从此,柳丛就踏上了对影子爱东说念主的追寻之路。
我告诉AI这个创意后,它很快给我编了一个小故事,的确是让我相称惊喜,也让我对AI刮目相看。因时候有限,这里省略细复述,只简要例如。
AI想象出一位奥秘老者对柳丛进行提点:影子爱东说念主其实是由一个陈腐魔法生成的。故事因此带有了很强的奇幻颜色。那么柳丛在追寻影子爱东说念主的说念路上都发生了什么呢?有若何的繁忙潦倒?在这个基础之上,我又进一步给AI提了一些新要求,主若是为了推论和丰富情节,生成的内容体量作念一个微短剧应该够了。如柳丛和影子之间有哪些温馨的过往和机密的默契?他们之间如何互动?误解、闹别扭、拔除污蔑之后的甜密是若何的?柳丛自后在追寻影子爱东说念主的路上,又遇到了哪些敌东说念主?敌东说念主当中,有和影子爱东说念主相称相似的雕悍影子。在困扰时柳丛是如何进行鉴识的?这方面我料想的其实是《西纪行》中的六耳猕猴。终末,柳丛发现影子爱东说念主消释的真实原因是陈腐魔法章程的,她的灵魂是有大限的,这么就引向了一个奇幻落拓主义的悲情结局;在此基础之上,后生和影子爱东说念主之间骨子上是自恋性的纳卡索斯情结,不错想象柳丛最终走出内心阻滞,与影子爱东说念主的永别配置了他的精神成长,这么故事就带有哲盼望辨的颜色了。GPT络续给我带来惊喜,我一个不会编故事的东说念主,在东说念主工智能的协助下,果然创造了一个微短剧,AIGC算不算是给我赋能了呢?
图片来自集聚
AIGC又何止是给编剧赋能,咱们说它对影视创作的全经过各表率而言,险些即是个万能助手。比如导演漠视全体构想,AIGC不错在变装塑造、地域特色、制景等方面自动生成所需要的图像和模子。天然,当下由于普及性不够、成本高等原因,有些期间诚然能达到了,但成本上却不经济,照旧无法全面完了,从异日趋势看,应该有很大的拓展空间和出路。目下在一些大制作中已有越过多的期骗。宗旨图、分镜头的场景绘画、说念具想象、舞台想象等职责,Mid journey软件就不错胜任。网上依然能看到相称多的演示,3D建模早就在用AIGC接济了,比如《流浪地球》系列、《封神》等。后期的智能裁剪职责,字幕、颜色等也都能用AI来完成,刘德华年青版块换脸换妆,全球都看到了;另外,当下艺东说念主因各种原因导致的舆情风险较高,有AI的接济,不错大大裁汰制片方遭受艺东说念主舆情问题时的亏本。
图源:该论坛会务组依照发言题目和嘉宾信息,
使用Mid journey生成
影相方面,从光化学显影、数字影像到AI助力影相,这就像是为影相机安上了透视眼,借助AIGC的预效果图,不错大大裁汰骨子拍摄成本,找到最好的拍摄决策、角度、造型、光影、颜色,追求最好效果。天然前提仍然是需要有老到的影相师漠视决策、悉数把捏并了解熟悉Sora运作限定。
图片来自集聚
在此咱们也推选一个英伟达深度学习培训中心的信息,经过深度学习(可能需要付费),异日你可能得回更多的处事选拔契机。就像互联网给咱们带来极大便利和创造力同样,AIGC赋能影视创作,也会有着高大后劲,就看咱们如何去培训和成立它。
同期,动作学术论题,咱们也要进行一种延展性的反想。这种反想既是表面性的、文化层面的,也波及当下的创作实施。率先,AIGC赋能影视创作有莫得题材的上风和劣势,值得咱们想考。目下AIGC脚本创作带有模板化本性,前边提到的经典叙事结构反复搬用,对ChatGPT的锻真金不怕火还需拓展拓深,充分开掘AIGC深度学习的能力后劲。语料,独特是优质语料需要不休丰富,不错预期AIGC会给咱们带来更多惊喜,天然前提仍然依赖东说念主类的雅致计议创意能力。目下,仅效法经典叙事结构还远远不够,也容易变成创作门槛低、作品量高质低、扁平化发展趋势,会因此变成惩处成本高企,这类问题时常与新事物相作陪,亦然咱们所忧虑的问题。
图片来自集聚
其次,目下对AIGC语料的锻真金不怕火,偏重西洋文化内容方面,今后对AIGC的培训、语料投喂应加强中国优秀传统文化的体量重量;天然语料也应更具绽开性,而不是因过多禁忌和截至而画地为牢——那样会截至AIGC的能力和后劲,和咱们追求的影视创作高质料发展的宗旨是不匹配的。
再次,应想考,语料是不是取之不尽的?有磋议骄贵,高质料语料2026年行将浮滥,这个音信是否准确?以及传奇低质料语料将在2030-2050缺少,低质料图像将在2030-2060缺少。这些景色应引起咱们的扫视。目下仅中关村就有几十家公司烦懑于于东说念主工智能大数据集的成立职责,带有对大数据提前布局的意味,由此在推崇大数据上风的同期,成立成本较高是否会变成骨子应用时的占有纠合?如东说念主们了解的,互联网发展过程就伴跟着快速纠合化趋势,也让咱们不由得空想,东说念主工智能的发展因成本参加更高会不会带来更强的纠合趋势?从而谢却创作对等,这亦然咱们忧虑的。
图片来自集聚
其他问题如AIGC期骗与成立中对语料版权的侵权问题,以及当AIGC以东说念主机协同形状参与创作,是不是不错被视为创作东体?天然还有对AIGC说念德伦理水平的要求——AI是很容易受语料影响、带偏的,亦然容易被教坏的。那么由谁来信赖AIGC的语料组成?以及如何锻真金不怕火AIGC?这些问题可能对国度的文化安全有弥远、潜在的影响,亦然咱们需要关注和想考的。
我的不老到的想考就文告到这里,请诸位群众和学者们月旦指正。
论坛先容
东说念主工智能(AI)期间的高速发展,激励了时常关注。连年来,影视行业积极改革,中央播送电视总台合伙上海东说念主工智能实验室发布了“央视听媒体大模子”,加强艺术与期间之间的互动实施。复旦大学与阿里云等共同打造智能规划平台CFFF(Computer for the Future at Fudan),是国内高校最大的云上科研智算平台,为磋议者开发前沿课题提供了新的算力复古。面对东说念主工智能时期的新机遇和新挑战,“AI艺术实施与异日影像发展”学术论坛于2024年4月5日举行。为复旦大学中语系影视好意思学的系列学术行动之一,这次论坛邀请到了国内多家高校的学者代表,共同推敲高新期间转型升级的时期命题,包括:影视中的AI、AI期间应用和异日影像发展。与会群众学者们共同关注艺术与期间的互动会通,想考影像文化的异日走向。
附:对于生成式东说念主工智能
应用于我校在校生学术实施的提醒
同学们需坚贞使用生成式东说念主工智能等新期间开展毕业论文(想象)的局限性、风险性,包括但不限于生成式东说念主工智能可能产生的信息不准确、防碍改革性等问题,以及由此可能激励的学术怪异风险,
生成式东说念主工智能在毕业创作中的使用范例,应包括但不限于:
(1)不得将东说念主工智能列为后果共同完成东说念主,不得使用生成式东说念主工智能平直生成选题。
(2)奉命相干法律法例及学术范例,依规合理使用生成式东说念主工智能处理翰墨、数据或学术图像,防患伪造、蜕变数据等风险。
(3)不得平直使用未经核实的由生成式东说念主工智能生成的参考文件。
(4)须明确表示是否使用生成式东说念主工智能(情况阐发表有相应模板,点击原文可下载)。如使用,须胪陈使用形状、细节,包括模子/软件/器具称呼、版块及使用时候。波及事实和不雅点引证的接济生成内容,须明确阐发其生成过程,并同期在毕业论文(想象)相应位置具体标注,确保真实准确和尊重他东说念主常识产权。
(5)如同学在“情况阐发表”中未按照骨子情况给以阐发,视为违章步履,应给予相应惩处。
转载自“中传戏文”公众号