0.7秒完成动漫线稿上色，爱奇艺发布AI上色引擎
出品 | AI科技大本营（ID:rgznai100）
中国漫画的需求量在不断增加，而动漫制作成本一直居高不下。究其原因为动漫制作是一个复杂且耗时的过程，需要大量工作人员在不同阶段进行协作。
动漫制作过程中，需先创作关键帧草图，接着完成中间动作草图，最后在设计的颜色图表基础上反复为所有线条上色。
在上色部分，需要大量重复工作，例如画师画好人物风格后，有大量人物形象的相同或相似帧需要上色，而其背景和特效大多可以复用。若能找到一个自动一致的草图框架着色方法，就可以显著提高动画制作的效率，大大节省开支和人工成本。
能给漫画线稿上色的AI工具可能并不稀奇了,但目前业内较多是针对静态漫画的上色工具，而动画的上色难度更高，需要保持前后风格的统一性、连贯性，对上色质量、精细程度了提出更高要求，静态漫画上色工具难以达到良好效果。
为此，爱奇艺率先推出智能上色引擎，自主研发智能上色引擎，利用深度学习，自动识别漫画内容，进行智能上色，帮助画师将更多时间花费在创造性的工作内容上，从而提高动漫内容更新频次，助力和赋能动漫及动态漫制作。
目前有一些针对静态漫画的上色工具，在上色时，需人工参与优化局部的上色效果。而爱奇艺智能上色引擎无需人工参与，上色过程也更为便捷。助力带动国内动漫市场活跃度，进而激发创作者创作更多新作品。
这主要是因为爱奇艺智能上色引擎采采用了基于GAN的自研模型。该模型引入了注意力机制和语义参考信息，使得模型能够理解线稿。同时多种loss相结合，用于像素级别的精细匹配和上色。此外，该上色引擎还设计了色彩参考模块和风格参考模块，来提高上色图片的色彩丰富度和风格统一性。而且在上色引擎的研究过程中，形成多个子模块，如光影分层模块，同时这些子模块也可以延展应用到其他领域，满足该领域的上色需求。
同时，爱奇艺的智能上色引擎支持两种上色模式，既能依照爱奇艺自研的精美风格上色，也可以根据不同动漫工作室的指定风格进行上色，如写实风、白描风、可爱风等，并可以直接用于工业生产。通过爱奇艺智能上色引擎获取到的数据，可构建线稿数据库以及不同风格的动漫数据库。
与传统动漫上色流程相比，爱奇艺智能上色引擎提供分层上色的模式，以便于专业画师可以灵活调整，让上色结果更加贴近画师的创意。
此外，爱奇艺智能上色引擎解决了许多传统上色的问题，可呈现更好的上色质量和更精细的效果。
动画中的动漫人物风格统一：设计风格和色彩参考模块，提高上色图片的色彩丰富度和风格统一度，各帧之间的动漫人物可保持风格统一；
服饰的统一性：引入语义参考模块和注意力机制，保证上色结果在语义上的准确性， 各帧之间的人物形象可保持语义统一 ，如视频人物可根据特定要求，保持服饰统一；
人物更加生动：根据具体需求调整网络结构，使模型与数据更匹配，上色质量更高，阴影面积、颜色色调方面与原画的差异更小，且更为精细，人物画面也更加生动。
据爱奇艺称，该智能上色引擎可帮助画师增效数倍，每张线稿只需0.7秒就可完成上色，预计可在动漫制作上色环节中节省约30%的人力。
爱奇艺推出的全新上色模式，优化了动漫行业的工作方式，提高了动漫制作的工作效率，帮助画师将更多的人力投入到了创作类工作中。同时，爱奇艺自主研发的上色风格，还为专业的动漫画师提供了更多的上色思路。
更多精彩推荐
赠书 | 图像分类问题建模方案探索实践
程序员奶爸用树莓派制作婴儿监护仪：哭声自动通知，还能分析何时喂奶
强化学习：10种真实的奖励与惩罚应用
全球数百万台 Mac 疑似因 Big Sur 更新险酿计算灾难，苹果官方回应来了！
大神们都是如何在时间序列中进行特征提取的？看完就懂了！
相关文章：
Java Web整合开发读书笔记
下载JDK：http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html 下载Eclipse: http://www.eclipse.org/downloads/ 下载Tomcat: http://tomcat.apache.org/download-70.cgi 正则表达式：http://www.cnblogs.com/deerchao…
ListView中CheckBox使用问题
因为CheckBox的点击事件优先级比ListView的高，所以当ListView中使用CheckBox会导致ListView的setOnItemClickListener失去响应。 解决的方法：在CheckBox中加入android:focusable"false"。使得CheckBox初始的时候没有获取焦点。 假设想在单击C…
网页播放的视频代码
网页播放的视频代码 第一种是通过调用window media player进行播放诸如：wmv,asf等格式文件: <object alignmiddle classOBJECT classidCLSID:22d6f312-b0f6-11d0-94ab-0080c74c7e95 height320 idMediaPlayer width356> <param name"ShowStatusBar…
[Ruby] 模块
1. 命名空间模块定义了一个命名空间，方法和常量可以在其中任意使用而不必担心被其他方法或常量干扰，例如：module Testdef Test.method()end end模块常量的命名和类常量一样，都以大写字母开头，方法定义类似于类方法的定…
10个工程师，9个不合格！
如果你想问最近这些年什么编程语言最值得学习，我会毫不犹豫的告诉你是Python。无论是刚入门的程序员，还是年薪BATJ的技术大牛，都无可否认现在Python对于一个程序员职业发展的重要性。所以不仅是开发小白，甚至很多开发老手…
云计算（2）it 是什么
2015年，全世界在it上面的花费达到3亿8千亿美金之多。 云数据中心：核心基础架构，云计算的物理载体，提供数据处理、存储和高性能计算支撑，包括服务器、存储、冷却、机房空间和能耗管理等。 超大规模的云数据中心…
大批量生成假数据，faker.js获得近28k个Star
整理 | 夕颜图源 | 视觉中国来源 | CSDN（ID:CSDNnews）近日，GitHub上一个生成假数据的项目faker.js火了，攀升Trendinging榜单第二，标星目前已超过27.1k。只需要简单几步操作，就可以在浏览器和node.js中生成大…
C++代理类,句柄(智能指针)_C++沉思录笔记
代理类 首先定义三个类: class Animal{ public:virtual void getName()0;virtual void clone()0; };class Cat:public Animal{ public:void getName(){cout<<"this is Cat"<<endl;}Animal* clone(){return new Cat;} };class Dog:public Animal{ public:…
浅析C语言的一个关键字——register
1、register修饰符暗示编译程序相应的变量将被频繁地使用，如果可能的话，应将其保存在CPU的寄存器中，以加快其存储速度。例如下面的内存块拷贝代码， /* Procedure for the assignment of structures, */ /* if the C compiler doe…
《Haskell趣学指南》—— 第1章，第1.2节小朋友的第一个函数
本节书摘来自异步社区《Haskell趣学指南》一书中的第1章，第1.2节小朋友的第一个函数，作者 【斯洛文尼亚】Miran Lipovaca，更多章节内容可以访问云栖社区“异步社区”公众号查看 1.2 小朋友的第一个函数函数的声明与它的调用形式大体相同&…
ASP.NET中利用DataGrid的自定义分页功能和存储过程结合实现高效分页
关键字：DataGrid、存储过程、分页出自： http://blog.csdn.net/yzx110/archive/2004/08/18/78525.aspx摘要：在最进的一个项目中因为一个管理页面要管理的数据量非常大,所以必须分页显示,并且不能用DataGrid的内置分页功能,于是自己实现分页. 下…
看清头秃元凶，腾讯AI首度揭示真相
出品 | AI科技大本营（ID:rgznai100）11月17日，腾讯公布了一项人工智能助力药物发现的新进展。通过腾讯自研的提升蛋白质结构预测精度的新方法，联合研究团队首次解析了II型5a还原酶（SRD5A2）的三维结构&#x…
UNIX--stat、fstat和lstat函数
2019独角兽企业重金招聘Python工程师标准>>> stat、fstat和lstat函数(UNIX) #include #include int stat(const char *restrict pathname, struct stat *restrict buf); 供给文件姓名，获取文件对应特点。感受通常是文件没有翻开的时分这样操作。 int fst…
UVA 1482 - Playing With Stones(SG打表规律)
UVA 1482 - Playing With Stones 题目链接 题意：给定n堆石头，每次选一堆取至少一个。不超过一半的石子，最后不能取的输，问是否先手必胜 思路：数值非常大。无法直接递推sg函数。打出前30项的sg函数找规律 代码ÿ…
Google和网易有道合作开课了
11月16日，2020年Google开发者大会正式开幕。受疫情影响，本次大会首次以线上形式举办，这也是Google首次以全线上形式与中国开发者相聚。本届大会主题聚焦“代码不止”，其中“学习”成为本次大会重要板块之一。在该主题下࿰…
Node.js v0.10版本发布
Node.js研发团队发布了node.js v0.10版本，它是个基于Javascript、用于构建高性能异步服务器的平台。该版本主要更新如下：更易于使用的数据流处理模块，通过域更好地处理错误，此外还带来了性能方面的提升。该团队还宣布在v0.10之后、…
动手扩充FreeTextBox的功能
作者：朱俊代码：C#关键字：FreeTextBox、流媒体出自：http://blog.csdn.net/foxmail/archive/2004/08/21/81096.aspx摘要：最近一个项目要求可以在发表文章的时候能发布电影，当然不可能叫用户去写HTML代码了&am…
《防患未然：实施情报先导的信息安全方法与实践》——3.3 攻击剖析
本节书摘来自华章计算机《防患未然：实施情报先导的信息安全方法与实践》一书中的第3章，第3.3节,作者：[美] 艾伦利斯卡（Allan Liska） 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.3 攻击剖析 为了开发更…
c#.net常用函数和方法集
1、DateTime 数字型 System.DateTime currentTime new System.DateTime(); 1.1 取当前年月日时分秒 currentTimeSystem.DateTime.Now; 1.2 取当前年 int 年currentTime.Year; 1.3 取当前月 int 月currentTime.Month; 1.4 取当前日 int 日currentTime.Day; 1.5 取当…
员工培训：如何制定以数据为依据的业务决策
作者 | Kamy Anderson翻译| Katie，责编 | 晋兆雨出品 | AI科技大本营头图 | 付费下载于视觉中国普华永道的研究表明，高度数据驱动的组织在决策方面取得显着改善的可能性要高三倍。不幸的是，高达62％的高管仍然更多地依赖经验和直觉…
IoC容器Autofac(1) -- 什么是IoC以及理解为什么要使用Ioc
阅读目录: 一. 一个没有使用IoC的例子 二. 当需求发生变动时，非IoC遭遇到的困境 三. 使用IoC彻底解决问题 四. 总结 一、一个没有使用IoC的例子 IoC的全称是Inversion of Control，中文叫控制反转。要理解控制反转，可以看看非控制反转的一个例…
【直播预告】7月18日3D游戏引擎免费公开课答疑，參与送C币！
喜讯喜讯！为了酬谢广大学员。CSDN学院特推出iOS和3D游戏引擎开发免费技术答疑公开课，让您度过一个充实的暑假~ 參与本次公开课，即有机会获得50C币！ 答疑公开课时间：7月18日 晚7:30-9:30 答疑主题：姜雪伟3D…
Linux0.11内核引导启动过程概述
Linux0.11仅支持x86架构。它的内核引导启动程序在文件夹boot内，共有三个汇编代码文件。按照启动流程依次是： （1）bootsect.s。boot是启动引导的意思，sect即sector，是扇区的意思，二者合在一起启动…
用Python分析5000+抖音大V，粉丝最喜欢的视频类型是它
作者 | 小F来源 | 法纳斯特头图 | CSDN下载自视觉中国最近，小F在知乎上看到一个关于抖音的问题。里面提到了，目前我国人均每天刷短视频110分钟。看这数据，看来小F又被平均了。不过老实说，只要一打开抖音，小F确实是有一…
JSTL 读取数组 和 字符串连接
2019独角兽企业重金招聘Python工程师标准>>> JSTL读取数组： 从后台取得一个字符串，如：AA-50-3，通过-划分成字符串数组。然后读取每个字符串。 <c:set var"cle" value"${fn:split(AA-50-3,-)}"…
《Photoshop Lab修色圣典(修订版)》—第1课1.7节言归正传
本节书摘来自异步社区《Photoshop Lab修色圣典(修订版)》一书中的第1课1.7节言归正传，作者【美】Dan Margulis,更多章节内容可以访问云栖社区“异步社区”公众号查看。 1.7 言归正传Photoshop Lab修色圣典(修订版)上面的讨论说明，与其他方法相比&#x…
PHP获取当前时间差8小时的问题
<?php echo date("Y-m-d H:i:s"); //当前时间 ?> 这个方法获取的时间和标准时间差8小时；从php5.1.0开始，php.ini里加入了date.timezone这个选项，默认情况下是关闭的也就是显示的时间（无论用什么php命令…
四连通，和八连通的详解（MATLAB）
转至：http://www.cnblogs.com/xiaojidan/archive/2012/08/20/2647261.html 功能：标注二进制图像中已连接的部分。语法：L bwlabel(BW,n) [L,num] bwlabel(BW,n) 其中BW为输入图像;N可取值为4或8表示连接四连通或八连通区域;NUM为找到的连通…
梅花桩上练真功，腾讯公布机器人移动技术探索新突破
出品 | AI科技大本营11月20日，腾讯公布了其在移动机器人研究方面的新进展：四足移动机器人 Jamoca 和自平衡轮式移动机器人首次对外亮相。Jamoca 是国内首个能完成走梅花桩复杂挑战的四足机器人，自平衡轮式移动机器人的相关研究成果还入选了机…
《Redis入门指南（第2版）》一第2章 准备
本节书摘来异步社区《Redis入门指南（第2版）》一书中的第2章，作者： 李子骅 责编： 杨海玲，更多章节内容可以访问云栖社区“异步社区”公众号查看。 第2章 准备 Redis入门指南（第2版）“…