乾明 丽翔 凹非寺 物理位 报导 | 社会公众号 QbitAI

GAN，又有了新“动作游戏”。

最近，一个能将音频间接转换成漫画书的工具，引发了很大关注。

它的效用是这种的：

Twitter上不少学者去驻足观看，新体验的效用是这种的：

有网友评价称，“夜魔侠感”透出。

效用直追夜魔侠？

目前，Demo已经释放出，物理字用章《蜘蛛人联盟3》中的一个短片为例，测试了一下实际效用，得到了这种的两幅图。

镜头看上去的确非常华丽，但是……假如不看原音频，只看那个漫画书，你知道它讲的是啥吗？

......

现在给出正确答案：

新体验Demo时，能自己上载音频，也能优先选择YouTube中的音频。总之，他们也提供更多了许多样品音频，能间接新体验。

示意图右图，在聚合Demo时，还有许多快捷键，能影响聚合的漫画书。

这些快捷键分别能控制音频中帧的优先选择、每一格的抽取方式、影像评估结果方式，以及漫画书的艺术风格北迁数学模型。

这基本上也呈现了工程项目项目组的大致思路：采用如前所述强化学习的sizes抽取演算法，抽取音频中有意义且有指标性的帧，然后对sizes展开评估结果，确认主要的镜头之后，再展开采用GAN展开艺术风格北迁，形成漫画书艺术风格。

在艺术风格北迁方面，科学研究项目组对当前已经发表的漫画书艺术风格北迁数学模型展开了科学研究，最后如前所述CartoonGAN的方式，利用MS COCO数据集训练出了自己的ComixGAN数学模型，作为Demo中的预设数学模型。

上手有少

那个工程项目，来自于立陶宛布拉格理工学院。Demo中文网站提供更多了APIUSB。

GitHub上也有源码。

总之，学术论文也出来了。

不过，特别聊著的一点是，那个Demo中文网站不稳定到让人难忍，非要就崩盘，有些时候间接大罢工。

假如你对那个工程项目钟爱，且有足够的“冷静”，下面的半条命请取下：

学术论文：

https://arxiv.org/abs/1812.03473

Demo门牌号：

https://comixify.ii.pw.edu.pl/

GitHub：

https://github.com/maciej3031/comixify

— 完 —

衷心招工

物理位正在召募编辑/记者，工作地点在北京海淀。期待有才学、有热情的老师加入我们！相关技术细节，请在物理位社会公众号(QbitAI)谈话介面，申明“招工”两个字。

物理位 QbitAI · 头条新闻号签下作者

վᴗ ի 跟踪AI技术和产品新动态