人间百态 实时热点

小伙AI修复百年前北京影像 网友感叹:太真实了

2020-05-11 09:32:56

最近,一段由AI修复的“100年前的北京晚清影像”在社交平台上火了。整个视频长约10分钟,把一段大约拍摄于百年以前、看起来有些卡顿的黑白纪录片,变成了宛若油画的彩色视频。

截至我们发稿时,这段视频在微博上的播放量高达1748万,在B站的播放量则超过了70万。许多网友留言称视频的逼真效果打破了他们的想象,仿佛已经闻到百年前北京街头的香火味。

小伙AI修复百年前北京影像 网友感叹:太真实了

播放量超过1700万、点赞57万的AI修复视频。图自微博。

视频的制作者,是独立艺术家、游戏制作人大谷Spitzer。今年28岁的他早在初中时就开始制作独立游戏,是个会编程、作曲和画画,同时兼做B站Up主的斜杠青年。如今,他在纽约生活和工作,疫情期间还跟朋友做了一款造口罩的小游戏。

在此次视频火爆之前,大谷Spitzer其实已经在B站上传过不少有关AI的视频,包括AI作曲、AI去马赛克、AI“生成老婆”等等。他甚至还用AI作了一款足球游戏,让大家看到傻乎乎的AI球员是如何进化到可以碾压人类玩家的。

在大谷Spitzer看来,AI好玩的地方在于,可以让很多想象变成现实,把很多不可言说的东西具象化。他自称只是AI领域的初学者,也希望通过一系列视频让大家看到,AI并不是那么“高大上”的东西,人人都可以用AI来表达和创作。

下面是南都·AI前哨站与大谷Spitzer(以下简称“大谷”)的对话。

····

用三种AI工具还原1920年代的北京

南都:怎么想到对这个纪录片做AI修复的?

大谷:我之前做了一些介绍AI技术的科普视频,其中也包括影像修复的AI技术。前段时间偶然看到这个纪录片,觉得用AI来修复它应该蛮有意思的。里面有很多路人在看镜头的画面,就好像他透过镜头在看着我、跟我互动。但我们相隔了100年,彼此都不知道对方的生活是什么样的。如果能把纪录片修复一下,让100年前的北京更活灵活现地呈现出来,效果应该会很不错。

修复视频中“穿越百年”的对视。

南都:修复过程是怎样的?

大谷:修复过程主要用了三种AI工具,分别用来补帧、上色和分辨率扩增。原版纪录片每秒只有6到10帧,看起来非常卡顿。我用DAIN(AI工具名称)来补充中间的画面,让视频变成每秒播放60帧左右,看起来会更加连贯。

上色我用的是DeOldify(AI工具名称),最后出来的效果还凑合吧。不满意的地方在于AI肯定没法保证准确性,因为它对清代的历史并不了解,只是根据它学习数据库的经验去上色。未来这种技术应该会变得越来越好。

分辨率扩增用的是ESRGAN(AI工具名称),它是可以把低分辨率的图像变成4K级别的分辨率。

大谷在视频中展示的对比效果。

南都:看到你微博上说,为了做修复视频,还借了朋友的显卡?

大谷:对,因为她的显卡是比较新的,用的GPU芯片更好。现在的AI工具虽然也支持CPU渲染,但速度会非常非常慢,比GPU要慢10倍。所以还是推荐用GPU来做。

南都:你是怎么知道这个视频火了的?

大谷:我在微博上发了视频后就去健身了,回来一看竟然有一万多次转发。当时还想是不是电脑中毒了。反正挺突然挺意外的。

微博中的网友评论。

南都:视频火了之后,有没有让你印象深刻的网友反馈?

大谷:一个是原版纪录片拍摄的时间,大家其实有再讨论。我查到的资料都显示它拍摄于1920年到1929年之间,但也有网友根据片子里的建筑物推测拍摄时间是1918年以前。如果按照资料的说法,1920年之后其实已经是民国初年了,不是我最初所说的“晚清”。历史没学好,感谢大家的指正。

另外有很多朋友在交流片子里出现的乐器啊、仪式啊,让我学到挺多老北京的民俗文化知识。还有一个网友特别有意思,他说他穿越过来以后很久没有看到过这样的视频了,让他很感动,好像回到了以前。意思就是他是个穿越者,哈哈。

南都:这两天网上也出现了很多“搬运”,你对此怎么看?

大谷:这个视频毕竟也不是我拍的,是100年前的一个加拿大哥们儿拍的,大家去转发也挺好的,只要注明出处就行。有个别的转发会把我的名字打码,这样就会感觉怪怪的。

····

希望人人都能用AI工具进行创作

南都:你在B站其实还上传了很多AI相关的视频,比如AI作曲、AI人脸生成等。是怎样萌生对AI的兴趣的?

大谷:我的主业是游戏开发,在AI领域只是一个初学者。但是在现阶段,很多AI工具已经很方便了,你不需要特别深入地了解编程知识,只要在工具里输入一些简单的指令就可以操作。我做这些是希望能让大家了解到,人工智能可以被应用到现实生活里,效果也比较有意思。

AI好玩的地方在于,它可以让你的很多想象变成现实,把很多不可言说的东西具象化。举个最通俗的例子,基努·里维斯和蒙娜丽莎如果结婚了,他们的孩子长什么样?现在就有一种AI工具可以模拟出来。

也正是因为这样,AI给流行艺术的创作带来了更多的灵感。我也看到很多当代艺术家在用AI来做可以交互的新媒体作品、装置作品。

相关推荐

最新文章