AI(Artificial
Intelligence)正在不停的变更在各个行业的形象以及人们的活方法,图像识别、语音识别、自然语言理解等
AI
技术正在活动驾驶、智能机器人、人脸识别、智能帮手等领域受到表达着越来越重要之意图。

这就是说当手绘视频遇到 AI,有 AI 的手绘视频领域,有 AI 的 UWP
手绘视频创作工具,会生数什么为?我们从12月23日底均等次于发布会开说起吧:

2018年短视频新生态峰会和来画新品发布会

 

以本次发布会上,来画视频发布了正规上线的 iOS Android 手绘视频 App
和相同层层初职能,二再度、同道大叔、Prezi
创始人等啊带动了短视频行业的可以分享,而以 AI
方面,更是发表了一定量颇骨干功能:智能配音和智能绘画。

妇孺皆知,在视频中,图像及音响是无比关键的点滴个因素,而对诺到手绘视频中,则是配音和手绘素材:

1. 配音

率先来说配音,在配音方面,来作画和科大讯飞进行了深合作。科大讯飞是国内外语音识别及语音生变为世界领先的人为智能公司,而此次合作吧是科大讯飞在短视频领域的首软尝试,双方还针对本次合作寄予了老大高的期待。过往大家想做一个短视频时,配音要正式配音人员形成。因为咱们多人数的动静或对语速、语音的控制得不了规范的要求。但仗来画和科大讯飞完的智能配音功能,如下图的操作方法,用户仅仅待输入简单的文及你想利用谁之动静。比如葛优、林志玲或者其他人的声,可以装基本语速,还好开相应停顿,就可以一键变通视频被需之配音,把她做到手绘视频被。

鉴于手绘视频不像照视频那样对配音的音画同步要求那么严峻,我们于落实时再次多的是对准手绘视频的每个分镜头进行配音生成,让每个分镜头的配音是暨目前画面同步的。针对每个分镜头,可以设置不同之语音来源,不同的语速,配合转场动画设置不同的中断时间。

在技能实现上,借助科大讯飞的 tts 技术,获得每个分组的 mp3
语音文件,在手绘视频预览和变化时,把多独 mp3
文件合成到视频文件的音轨中,设置不同的轻重和语音开始时间、语音长度等信息。为保险语音生成的成功率(时长和一起方面),在输入文字后,可以依据仿数据,以及安装的语速和间断时间,来预估语音的时长,减少反复转换尝试。

2.  手绘素材

在中华,有数亿的手绘爱好者,大家渴望用手绘视频的法来发挥友好之感想。但是苦于绘画基础的差别,很多总人口绝非道十分顺利的完成手绘视频的著作。

呢之,目前来画视频平台积累了大气底手绘素材,拥有丰富的价签和精准的归类,让用户可随心的挑三拣四。

尽管,来打还以相连追又好的艺方法来满足用户对手打素材的要求,降低写作门槛。而这种技能方法尽管是来画的
AI。

来画 AI 由三有组成:手绘路径的智能识别、智能优化和智能生成。

立马是一个不息推向的过程,当用户绘制一段路时,来画 AI
算法可以辨认以及透亮路径,推荐产生最符合用户想法的归类素材供选择,选择后尚得做智能填色等继续处理。比如用户以写生类似圆形的不二法门,AI
可以识别为宏观,球形,水果等;而在用户画了片只圆圈,再错过打一个梯形时,AI
会认为你想打一部汽车。这就是咱当下研发成功的智能识别功能,它可以极大降低用户做素材的时日跟难度。

苟复进一步,当用户绘制一段落路,比如曲线时,AI
算法识别和清楚路径,并对准曲线中产生过错的有路线做出局部纠正及优化,这样可以在降低写作时难度的根基及,极大的保留用户之手绘内容与风格。

终极,我们设贯彻的凡 AI 自动绘画,你偏偏待报 AI 你想画的情节,AI
就可以遵循对该用户绘制风格的知与评判,自动完成整治副画作的绘图,包括完整画风、路径、颜色填充等。这样的来画AI,能够极大的下挫用户做素材的日子以及难度,让抱有没有打基础的口,也得以长足的完结高质量的属于自己之手绘视频写,这才是来画
AI 要兑现之靶子。

当术实现者,智能识别是图像识别的纵深上,具体说是手绘草稿的识别圈;在算法模型的训方面,我们对类似
400 只分类的 4000w 独 SVG
数据开展了数清洗和标注、训练,目前算法对于广大图形的甄别功能特别好,随着这无异于成效的上线,后面呢会加强再多分类的多寡收集和教练工作;而智能优化及智能生成,除了对草稿的图像识别,还有对于绘制图形的门路理解与目标图形的门道理解,这吗是后面突破的首要方向。

构成了配音功能及手绘素材智能识别的 UWP
来画视频将会晤以接下发布,欢迎大家下载应用,多提宝贵意见。

针对当下点儿个点感兴趣的情人,欢迎和自家交流,谢谢!

发表评论

电子邮件地址不会被公开。 必填项已用*标注

网站地图xml地图