您现在的位置是:热点 >>正文
AI教你画油画:任意画风都可驾驭,笔画序列秒秒钟呈现
热点2029人已围观
简介...
本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。
AI已经能教AI你画油画了。
随便给一张图,笔画序列秒秒钟呈现。
比如世界名画蒙娜丽莎。
亦或是写实类的小鸟。
还有极具氛围感的河灯。
总教你之什么风格都可以驾驭。
这项技术在Reddit上21小时内就已经有600+的点赞量。
究竟是如何打造的呢?
用画油前馈网络预测笔画
神经绘画,就是为给定的图像生成一系列笔画,并使用神经网络进行绘画式的真实再现过程。
研究团队画:提出了一个基于Transformer的框架,叫做Paint Transformer,用前馈网络来预测笔画的参数任意。
由于当前没有可用的数据集来训练Paint Transformer,受物体检测启发,研究人员设计了一个自训画风练Pipeline。
整个模型由两个模块组成:笔画预测器和笔画渲染器。
给定目标图像和中间画布图像,笔画预测器,都可生成一组参数以确定当前笔画集。
预测器包含了两个用于特征嵌入的CNN网路和一个用于参数预测的Transf驾驭ormer。
随后,笔画渲染器为笔画集汇总的每个笔画,生成笔画图像,并将它们绘制到画,产生结果图像,大小,笔为512*512。
在DETR(用Transformer进行对象检测)的基础上,增加了二进制神经元来预测画序笔画是否应该被保留。
这样它就可以在没有任何现成的数据集的情况下进行训练,同时还能实现出色的泛化能力。
实验表明,列秒这一方法比以前的方法取得了更好的绘画性能,而且训练和推理成本更低。
百度南大团队打造
这项技术由百度、南京大秒钟学、罗格斯大学共同打造。
目前代码已经开源,并在一刻相册App上应用。
论文地址:
https://arxiv.or呈现g/abs/2108.03798
GitHub网址:
https://github.com/wzmsltw/PaiAIntTransformer
Tags:
相关文章
云计算核心技术Docker教程:docker-compose添加网络
热点默认情况下组合设置一个网络应用程序。每个容器的服务连接默认网络和网络上,既可通过其他容器,并发现他们在一个主机名与容器名称相同。 为应用程序的网络提供一个基于“项目名称”的名称,该名称基于其所在目录的...
【热点】
阅读更多标签: Meta Limitless Rewind Mac AI穿戴设备
热点云梦级12月6日云梦级消息,据科技媒体 9to5Mac 报道, Meta 公司宣布收购 AI 初创公司 Limitless(前身为 Rewind AI),其核心产品 Rewind Mac 应用将于 1...
【热点】
阅读更多云安全日报210810:IBM数据保护平台发现跨站脚本攻击漏洞,需要尽快升级
热点IBM Security Guardium是IBM公司的一套提供数据保护功能的平台。该平台包括自定义UI、报告管理和流线化的审计流程构建等功能。 8月9日,IBM发布了安全更新,修复了IBM Secu...
【热点】
阅读更多