01

ControlNet颠覆AI绘画新玩法

AIGC向可控靠近

以AI绘画为代表(恋爱初期很平淡还有必要谈吗，有男朋友却感觉不像在谈恋爱biǎo)的AIGC上(shàng)一次爆火(huǒ)的时候，还是2022年8月，在美国(guó)科罗拉多州举办的新兴数字艺术家竞赛(sài)中，一幅(fú)名为《太空歌剧院》的作品(pǐn)获奖。

随后各大厂商(shāng)的AI绘画(huà)软(ruǎn)件被广大网友熟知(zhī)并体验，Stable Diffusion便(biàn)是其中代表。

用户(hù)们(men)可以(yǐ)在(zài)应用中输(shū)入一组关(guān)键词或者一(yī)张照片(piàn)，就能获(huò)得一幅(fú)AI创作的画作(zuò)。

作画的(de)关键就是所输入的文(wén)本(běn)。同一组(zǔ)关键词也(yě)可以(yǐ)创作出很多张风格不一样的画(huà)作，这(zhè)让创作的(de)过(guò)程(chéng)就像(xiàng)开盲(máng)盒。

很(hěn)多用户很喜欢(huān)这种(zhǒng)不确(què)定的惊(jīng)喜，他(tā)们会将生成的(de)美图当做头像。而另一部分喜欢翻看AI绘画(huà)的“翻车”作品。在(zài)社(shè)交媒体(tǐ)上，许多用(yòng)户分享AI“翻(fān)车现场(chǎng)”，例如，一位网友的小(xiǎo)狗照片被(bèi)AI画成了(le)“肌肉(ròu)男”，还有网(wǎng)友的个(gè)人(rén)照片被AI识(shí)别成(chéng)了建(jiàn)筑。

而如今(jīn)随着ControlNet的出(chū)现与(yǔ)加持，以往(wǎng)AI绘(huì)画的填(tián)写关(guān)键(jiàn)词游戏可能要(yào)被颠覆了。

ControlNet是一位(wèi)正在斯坦福读博的中国人(rén)张吕敏(mǐn)创作的一种基于控制点的图(tú)像变形算(suàn)法，主要用于数字图像处理、计(jì)算机视(shì)觉和(hé)计算机图形(xíng)学等领(lǐng)域。

其SD插(chā)件(jiàn)一经发布，在短短的(de)两(liǎng)天内(nèi)便成(chéng)为了AI绘画(huà)领域最新的(de)热点(diǎn)。

在此之前，大(dà)家用(yòng)了很多方法(fǎ)想让AI生成的(de)结果尽可能(néng)的符合(hé)要求，但是(shì)都(dōu)不尽如人(rén)意，它(tā)的出现代表(biǎo)着AI生成开始(shǐ)进(jìn)入真正的可控时(shí)期。

因为ControlNet可以(yǐ)直接提取画面的构图，人(rén)物的姿势和画面的深度信(xìn)息等。有(yǒu)了(le)它的帮助(zhù)，就不用频繁的用提示词来碰(pèng)运气(qì)，抽(chōu)盲(máng)盒式的创作了。

通(tōng)俗的说(shuō)ControlNet相(xiāng)当于给AI绘画加(jiā)了(le)“魔法”，不少(shǎo)博主的作品(pǐn)已经获得了大量的浏览(lǎn)量，“viggo”就是(shì)其中之(zhī)一，他用(yòng)朋友的照片直(zhí)接(jiē)带她(tā)们走进动漫世界(jiè)。

viggo先用StableDiffusion图片转文字。

再用Text2Prompt插件拓展找到对应的关键(jiàn)词(cí)；最后(hòu)用ControlNet插件绑(bǎng)定骨骼开(kāi)始换关键词试效果(guǒ)。

通过图片(piàn)就可以看出来，效果十分惊艳。

更厉害(hài)的是，除了真(zhēn)实的照片(piàn)，草(cǎo)图也可以加上“魔法(fǎ)”，知乎大牛(niú)“DevPoint”和“逗砂”介(jiè)绍到ControlNet还(hái)能实现(xiàn)线稿转全彩图。大神张吕(lǚ)敏其本(běn)尊也亲(qīn)自回应。

不得不说当下(xià)AIGC已经变得越来越(yuè)强大，甚(shèn)至输出的作品都已经能以假乱真了(le)。

02

难辨虚实(shí)，AIGC技术力爆发

警惕安(ān)全问题

近日，“苏(sū)州(zhōu)金鸡(jī)湖有游艇party”的(de)消息火遍网络，而经过警方辟谣这所谓的“party”可能(néng)是(shì)全国第一起AI绘图诈骗(piàn)。

由于这个活(huó)动(dòng)里面给出的美女照片都是AI制作的真人照片绘(huì)图，因为太逼真(zhēn)，被(bèi)大家(jiā)当成真事(shì)传播(bō)了。

不过仔细(xì)观察(chá)可(kě)以发现(xiàn)，活动发起者提供的照片中有(yǒu)个很(hěn)大(dà)的漏洞可以(yǐ)发(fā)现并非真(zhēn)人，而是(shì)AI绘图，那便是图片中女性(xìng)的(de)手(shǒu)指(zhǐ)部分有的(de)存(cún)在异常。

有(yǒu)行业(yè)人事表(biǎo)示：“现在因为手(shǒu)指部分的绘画算法比较复(fù)杂，AI还(hái)不太会画人的手(shǒu)，但(dàn)最新看到的图片(piàn)已经有越来越(yuè)完美(měi)的AI模(mó)型出现，以后可能就完全没有(yǒu)漏洞了。”

类似的(de)AI作(zuò)图诈骗在国外也已有发生。据英(yīng)国广播公司(sī)报道，土耳其地震期间，有Tiktok用户使(shǐ)用AI合成了儿(ér)童受灾的(de)假照片(piàn)发布到(dào)网络，以此(cǐ)诱骗善良的人打赏(shǎng)“捐助”从而实施诈(zhà)骗(piàn)。

目前随着技术发展，AIGC已经能(néng)做出真(zhēn)人照片般的绘(huì)图(tú)效(xiào)果，如果(guǒ)这样的图片(piàn)被用来诈(zhà)骗，将(jiāng)非常可怕。

此(cǐ)外(wài)AIGC还(hái)引(yǐn)发(fā)了很(hěn)多担忧，一方(fāng)面，批判者(zhě)认为(wèi)AI在“学习(xí)”了大量(liàng)前人(rén)的(de)作品之(zhī)后，其(qí)创作没(méi)有任何情(qíng)绪和灵魂，难以和人类的艺(yì)术(shù)创作相提(tí)并(bìng)论。

另一(yī)方面，AIGC背后的版权、目前(qián)都并(bìng)没有得到有效的(de)解决，还有AIGC会不(bù)会代替人(rén)类“至(zhì)高无(wú)上(shàng)”的创意。

马斯(sī)克也强(qiáng)调，人工智能的安(ān)全问题(tí)需要得(dé)到重视，太晚(wǎn)就来不及了。

03

AIGC下一(yī)站除了视(shì)频，还有远(yuǎn)方

技术(shù)都是有两面性的(de)，潜在的危害并不能(néng)掩盖其光辉的(de)贡献(xiàn)。现在看来，人工智能技术将是第四次工(gōng)业革命(mìng)的核(hé)心驱动力量(liàng)，将创造新的增长奇迹。

过(guò)去一(yī)年(nián)，人工智能在技(jì)术(shù)和商业层(céng)面都有了(le)巨大进展(zhǎn)，AI绘画就是人工(gōng)智能技术发生方(fāng)向性改(gǎi)变(biàn)的一个代(dài)表(biǎo)。其下一站(zhàn)或许就(jiù)是视频。

此(cǐ)前(qián)，Meta和谷歌先(xiān)后发布(bù)了几(jǐ)条引爆(bào)科技圈(quān)的短视频(pín)。这些(xiē)视(shì)频引发关(guān)注并非内容(róng)做得(dé)多优秀，反而都(dōu)非常简单(dān)，比如一匹正在喝水的马，一只画画(huà)的玩具熊，或者一段(duàn)骑摩托车的第一视角录(lù)像，随便一个有手机的(de)人(rén)都(dōu)可以(yǐ)随(suí)手录下一段(duàn)。

但这(zhè)些短视频的(de)创作方式非常简单(dān)，创作者(zhě)仅仅需要向AI输入一(yī)段话，甚(shèn)至(zhì)只(zhǐ)是说一(yī)下(xià)要求，AI就可以根据需要(yào)生成一段(duàn)视频。

谷歌发布的(de)两个AI生成视频分别来自于(yú)Imagen Video和(hé)Phenaki，前者主要突(tū)出的是高(gāo)清(qīng)，与Meta的Make-A-Video没(méi)有太多的差别(bié)。

在Make-A-Video公布了AI生成的视频后，AI圈就已(yǐ)经(jīng)玩(wán)了一波梗，一个能够做出更高清(qīng)视频的AI还(hái)不足以在短时间内戳中兴奋点(diǎn)。

Phenaki更加令人(rén)震惊的地方在于，它可以制作(zuò)出(chū)超过2分钟的连(lián)贯的也有确切内容的(de)视频(pín)，这(zhè)才是真正让人们(men)感到(dào)惊喜的地(dì)方(fāng)。因(yīn)为(wèi)无论(lùn)AI生成的视(shì)频多(duō)么高清，也(yě)只能是(shì)为(wèi)内容生产(chǎn)者(zhě)提供一(yī)个(gè)灵感，一(yī)个(gè)素材，一个过场动画。

不过能(néng)够制(zhì)作出(chū)有具(jù)体剧情(qíng)内容的视频就意味着，一(yī)些(xiē)视频创作由(yóu)AI代(dài)替人工完(wán)成已经初步有(yǒu)了可能。

当下AI的发(fā)展速度已经(jīng)超过大部分人的(de)想象。内容产业(yè)的本质(zhì)是供给创造(zào)需求(qiú)，AIGC作(zuò)为全新的内容生产方(fāng)式，可(kě)以(yǐ)为内容产业带来更新的内容风格、更快(kuài)的生产(chǎn)速度，更低(dī)的(de)生产(chǎn)成(chéng)本，这(zhè)无疑会驱(qū)动内容产业的大爆(bào)发。

除(chú)了AI绘(huì)图(tú)、视频，AIGC技术还能应(yīng)用于音乐、代(dài)码、机器人动作等多种内(nèi)容形式(shì)的生成。不难发现(xiàn)该项(xiàng)技术不(bù)仅(jǐn)在(zài)游戏等行业能(néng)得(dé)到有(yǒu)效应用，对(duì)于下一代互(hù)联网各种元素的构建(jiàn)亦有关键意(yì)义。

从商业化(huà)的角度来看，文化(huà)娱乐、教育、传(chuán)媒等诸多领域，本身就对基于AI的可(kě)视化内容有(yǒu)强烈需求。

因此，AI绘(huì)画及视(shì)频或不是(shì)结(jié)果，而只是AI进(jìn)程中的一块重要拼图，有望在技(jì)术更新的(de)加持下实(shí)现更大的应(yīng)用价(jià)值。

AI从理解(jiě)内(nèi)容，走向了可以生(shēng)成内容，甚至(zhì)能够创造出独立价值(zhí)和独立(lì)视(shì)角的(de)内(nèi)容。AIGC的再次出圈，更代表(biǎo)着未来(lái)的先进(jìn)生产力即(jí)将到(dào)来。

04

紧抓(zhuā)大模(mó)型与算力(lì)，牢固AIGC底座

从技术的(de)发展也可以看出，在语言大模型(xíng)、图像大模型之后，多模态(tài)大模型已经(jīng)成为(wèi)了新的趋势(shì)。

大模型被誉为(wèi)当前人(rén)工(gōng)智能发展的智(zhì)能底座，是全球竞争(zhēng)最(zuì)激烈的研(yán)究方向之一(yī)，包括谷歌、亚马逊、百度、阿(ā)里、腾讯等众多头(tóu)部企(qǐ)业(yè)都在竞相发力。

不(bù)过(guò)训练大模型的确(què)价(jià)格不菲，以国(guó)盛(shèng)证券发(fā)布的《ChatGPT需要(yào)多少(shǎo)算力》报告估算，GPT-3训练一次的成本约为(wèi)140万美元。而对(duì)于(yú)一些更大的LLM(大型语言(yán)模型)，训练成本则介于200万美元(yuán)至1200万美元高价(jià)之间。

以ChatGPT在(zài)2023年1月的独立访客平均数(shù)1300万计算，其对应(yīng)芯片需求为3万多片英伟达A100 GPU，初始投入(rù)成本约为8亿美(měi)元，每日仅电费就在(zài)5万美元左(zuǒ)右(yòu)。

此外不论(lùn)是ChatGPT还是AIGC，都离不开庞(páng)大算力支持(chí)。在(zài)关(guān)注(zhù)各类(lèi)大模型的发展同(tóng)时，更应该关注算力网络的(de)建设。

算力网络正(zhèng)驱动AI产业发展进入史诗级加速进程(chéng)，让AIGC及通(tōng)用AI这一人工(gōng)智能发(fā)展的终极目标离得更近。

因为算力(lì)可以对突破性技术创新提供大力(lì)的支持(chí)。这方面，多模(mó)态(tài)大(dà)模型是(shì)典型(xíng)。作为面(miàn)向(xiàng)未来强人工(gōng)智能、通用人工智能的重要(yào)技术创新，多(duō)模态大模型已经在人工智(zhì)能领域提出了很多年，业界也有不少技术突破，但是，多模(mó)态大模型进(jìn)一步往(wǎng)下走，算力(lì)需求(qiú)呈几(jǐ)何式(shì)上升，一(yī)般的算力基础设施很快(kuài)将难以胜任。

从图(tú)像、文字、语音单(dān)独(dú)一项的训练，到(dào)双模态(tài)、三模态的跃迁，让人工智能可以灵活应对不同模态的转化、像人(rén)与世界交互一样(yàng)自然(rán)，这方面，由算力网络(luò)来驱动(dòng)将有明显优势。

此外(wài)，还有很(hěn)多需要爆发式增长(zhǎng)的算力来支撑的技术创新，将(jiāng)在(zài)人工智(zhì)能算力(lì)网络支撑(chēng)下快(kuài)速推(tuī)进(jìn)。

AIGC已经露出曙光，期待在大模型和大(dà)算力的(de)支(zhī)持下(xià)AIGC能持(chí)续颠覆(fù)内容(róng)生产的方式，将创(chuàng)造的边际成本降低(dī)，让万众受(shòu)益。

未经允许不得转载：橘子百科-橘子都知道 恋爱初期很平淡还有必要谈吗，有男朋友却感觉不像在谈恋爱