自拍变漫画 AI 大火:可将视频 / 背景转为漫画风,全程稳定不掉线
消息来源:baojiabao.com 作者: 发布时间:2024-05-14
1 月 30 日消息,把自拍变漫画:
不止支持一种面部风格:
任凭小姐姐怎么"全身大比划",效果都能保持稳定,全程"不掉线":
不止人脸,连全身和背景也都全部照顾到了。
这,就是最近在 Reddit 上大火的一个自拍变漫画 AI,不到一天就收获了 1800+ 赞。
什么来头?
自拍变漫画,人脸、全身、背景都照顾到
这个 AI 叫 WebtoonMe,基于深度学习技术将图像翻译成漫画风格。
熟悉的朋友可能知道,Webtoon,web+cartoon,也就是"网页版漫画",是漫画的一种呈现形式,出自韩国。
这个自拍变身漫画 AI 的技术团队也来自韩国。
一开始,他们只做了人脸转换,后来打算把背景也包括进去。
不过问题就来了:照片中的各种物体(如面部、身体部位、衣服、背景等)的风格属性都不太一样,如何输出统一的结果呢?
作者采访了几位 webtoon 的创作者后了解到,webtoon 的"前景"和"背景"是用不同工具制作的,为了让两者更自然地融合,后期也添加了不少修饰。
因此,他们将这个 AI 分为面部转换和背景转换两部分,即一个背景生成器 + 一个面部生成器,把人脸裁切出来和背景分别处理。
具体来说,他们先构建了一个 webtoon 数据集,这个数据集由人脸、身体部位、物体和自然背景等不同部分组成。
然后创建了各种深度学习模型,用来减少前景和背景元素之间的风格差异。
最后又模仿了不同 webtoon 创作者的修饰技术,通过几种后处理算法,让生成的结果更自然、质量更高。
具体的技术细节我们还未可知,目前也还没有开放试用链接。
不过看起来让很多心动的背后,一些细心的网友仅通过几张示例就发现了一些问题。
眼睛的效果还需改进
就比如这个眼睛,很多网友表示有点恐怖啊,一直直视前方,眼球动也不动。
如果能模仿眼球转动、眨眼睛、眯眼等眼部动作,效果肯定会更好。
此外,抛去这一点,脸部和背景处理得都还不错,就是这个身体部位风格化得不够彻底,还是有点像真人。
倒是这个 AI 的稳定性值得让人夸赞。
哦,还有一点美中不足,有网友"惋惜":
要是这个 AI 还没取名字就好了,不然就可以叫 WaifuNet 了……[旺柴]
One More Thing
要说这人物变动漫的 AI,一直都层出不穷。
就比如前不久的 AnimeGAN2,采用神经风格迁移 + GAN,由湖北工业大学的三位学生和老师开发,也是大火,一度需要网友排几小时大队才能看一眼自己在动漫里的样子。
AnimeGAN2 的风格和今天的这个 WebtoonMe 不太一样,变换重点也只包括人脸,所以眼部跟踪做的挺好。
不过面对不够高清的人脸时,效果一般。
两者各有所长吧,你喜欢哪一种呢?
2022-05-08 06:48:22相关文章
- 美国法院裁定阿里须为Squishmallows玩具侵权案答辩
2023-12-28 19:59:34
- 小米汽车传员工3700人 雷军称小米汽车不可能卖9万9
2023-12-28 19:41:57
- 国家新闻出版署:认真研究《网络游戏管理办法(草桉徵求意见稿)》关切 实行前进一步完善
2023-12-28 19:14:56
- 天猫新规可以无条件申请“仅退款”了?淘宝天猫又离狗多多零元购近了一步
2023-12-28 18:57:55
- 印度以打击金融犯罪为由逮捕了两名 vivo 高管
2023-12-26 16:49:01
- 在国外微信收不到国内信息?微信和WeChat将被拆分
2023-12-15 10:40:15
- 苹果iPhone15 系列手机发布最新消息 预计上市发布时间9月
2023-08-06 23:21:02
- 华为将发布鸿蒙HarmonyOS4操作系统 功能五大升级支持设备清单
2023-08-06 23:17:37
- 整治自媒体网红账号 400万粉丝网红发布擦边视频被无限期封禁
2023-07-12 09:56:09
- 网传微信文件传输助手是真人是真的吗?微信官方回应
2023-06-27 15:53:32
- 电信移动送手机成了“信用购”?你上了运营商的贷款套路了吗?
2023-06-12 17:18:55
- 中国电信广东地区崩了无信号 客服回应已在核实处理
2023-06-08 15:39:04
- 消息称小米新能源汽车价格表正讨论定价区间:双版本不同配置,高配或超 35 万元
2023-03-06 12:56:03
- 华为因制裁被传或分拆剥离手机业务? 内部人士回应:可能性不大.
2023-03-05 23:26:41
- OPPO正式发布安第斯智能云,让终端更智能
2023-02-24 16:02:27
- 华为与OPPO签订全球专利交叉许可协议 包括5G蜂窝通信专利
2023-02-24 16:02:26
- 老蛙将推MINI镜头新品:目前未知具体规格 官宣将于12月20日发布
2023-02-24 16:02:26
- 首发全新35mm定制光学系统 努比亚Z50性能同样强悍
2023-02-24 16:02:25
- Redmi K60屏幕细节曝光:全系标配2K护眼柔性直屏+5000mAh大容量电池
2023-02-24 16:02:25
- OPPO Find N2今天发 合金金属折叠屏更轻了
2023-02-24 16:02:24