下一代艺术创作工具?
前阵子社群成员ML668跟我交流了这款工具,今天我终于有空去详细了解了一下,这是一款名为runway的工具。
自称下一代的创意工具。
最大的特点就是底层封装了很多的神经网络模型,用户只要像使用word一样,点选图形化界面,操作各种按钮,就可以完成模型的训练跟调试。
↑有没有看到你熟悉的框架?
- 贴近用户习惯
为了适合用户现有的工作流,runway开发了很多插件,比如grasshopper、photoshop、unity3d等都有插件。
- 易用性足够强
完全图形化的界面,不需要敲代码即可训练我们的神经网络模型,内置了许多主流的模型,我们只需导入自己的数据,调参训练即可。
- 丰富的输入输出
输入输出的各种数据也都支持:
官网展示了一些用runway制作的创意项目,我挑选了几个我比较喜欢的分享给大家。
- 图片生成引擎
这是一个根据文字生成图片的生成引擎,我们试玩下:
如上图所示,模型根据红色、蓝色、黄色画了一幅画。
单独以红色为题材,画的抽象画。
然后我尝试了其他词,有点感觉。
- 机器学习字体
作者在RunwayML中训练了styleGAN模型,该数据集包含2674种Google字体的数据集。最终利用机器所创作的字体。
- img2txt
当我们从网络上下载图像时,它们通常具有由长数字和字符串组成的名称。这是因为Web浏览器使用服务器提供的文件名来填充下载框中的文件名。
重命名下载的图像或尝试在计算机中搜索它们通常是一件痛苦的事情,并且会浪费大量时间。
作者使用机器学习来改善网络上的图像命名和可访问性。
上图是期望的输入、输出方式。
作者开发了一款浏览器插件,这款小工具经历了好几个版本的迭代。比较明显的特点就是AI预测的名字不一定是最优选择,提供一个良好的修改方式给用户,方便修改,同时用户修改后的数据可以反馈给系统,方便下次进行迭代改进。
- AI笔刷
利用pix2pix制造了很多艺术笔刷。
通过骨骼就可以自动生成人物,是不是漫画也可以这么玩?
左边是机器生成的,有种水彩笔刷的感觉。
油画也是没问题的。
以上为全文。
嗯,欢迎在mixlab的社群里讨论、交流下一代艺术创作工具相关内容~~
入群方式(回复2020):
1 邀请制,需要审核。
2 付费免审核加入。