|
谢谢!我想今天讲一下数字化的动漫,大家都知道刚才石老师讲了很多政策性的很高的层次来介绍这方面的情况,我讲一下我们过去的七年里头,微软中国研究院在数字化动漫方面我们做了哪些工作?我们在数字化动漫方面我们做了一些工作,因为讲是前一段时间的工作,现在增加了几个新的工作,从人像照片,怎么生成人物漫画,还有风景图片,生成抽象绘画,从真实任务到虚拟角色,从真实演员到虚拟舞蹈,虚拟的指挥等等。还有一些从家庭录像怎么样自动生成家庭的动画。以及石老师谈到了,有现在设计的很多工具为工程师设计,而不是动画师,怎么画家完全在纸上画,画二维的东西三维的东西就出来。
首先做一个人像卡通漫画与动画的工作,这个在过去七年里头,我们一直做这方面的研究,从学术上讲,我们在这个研究方向应该是做的最好的。我们在学术上发表大概20篇所谓顶级的学术论文,产品我们做了一些东西。
这个很有意思,你怎么样从一张顶级的照片能够生成像人画的漫画作品,怎么样把颜色上好,以及做夸张,技术上很有意思,计算机在技能方面已经做出很多的努力,当然最成功机器下棋战胜了世界冠军,另外我们在想计算机模拟人类的只能什么更有意思,除了下棋以外还有画画,画画以后通过观察对观察的物体进行加工,用自己的技巧和风格和他事物索要表达的东西做一次表达,这个过程是一个高度智能的过程。我们就想能不能探索一下这方面的工作,这个探索已经做了七年,我们还会再做七年,或者十七年,这个工作经过二三十年的努力能够往前走一些步伐。
(如图所示……)从计算机的角度来说,其实欧一些困难,第一个困难,现在所常用的图象处理软件做不出这样的东西,包括商业软件,只能做出这样的效果及做不出诊的像画的效果,画家学习的时候,画家从来不背公式,他们通过临摹写生,各方面的经验,通过师傅带徒弟的方式,通过自己的努力,这样的工作方式,这就带来一个问题,计算机离开公式是没有办法工作,怎么办?我们在这里台湾一种基于统计学习的方法。我们首先收集了很多的照片,我们买了很多照片,国内和国外的。然后我们请艺术家画了上千张的这样画,画的要求要求同一个风格,刚开始的我们不做太多的夸张,只要临摹就可以,然后我们训练计算机学习画家的工作,进来一个新的照片以后,我们计算机自动把脸有关的夸张分解出来,然后分析画家怎么画其他人,这样可以出新的照片。
最早的时候我们就做了一些工作,这些都是画家画的。画了一些特征,然后在2000年的时候,七年前用计算机做的,做的还是蛮像的,完全自动化,速度不错,当时计算机是1秒钟一张,而且现在是更快。
最早的时候我们只是关心他的轮廓,看看计算机能不能画轮廓,以后稍微加了一点阴影的效果,这个类似于铅笔的风格,以后在2001年的时候你给我一组照片,需要铅笔就铅笔,需要钢笔就钢笔,可以画出来,我们老经常开玩笑,我们是幼儿园大班的水平,画的优秀可能跟这个差不多,好了比大班的强一点,我们如果不断的努力,可能会小学毕业,能不能大学就不知道。只要后来有人接着做,画就画的更好。
以后我们希望能够画这样的东西,我们看计算机能不能画,类似的工作但是算法有所不同,这个是计算机画出来,但是还是保留一些东西,有些线条保留不够流畅,有些画不够好。我们希望大家多挑毛病。
这个当时看到华尔街日报,每天都会有采访,采访的每一个都画成这样风格的插画,这个插画看了美国的一篇报道,他们雇了很多画家,画这样采访的画大概40分钟,其实画的蛮快,但是后来我们想,我们也画了玩玩,我们就请了一个画这个东西,我们只用了10分钟。
当然我们很喜欢这样的风格,尽管在手法不能的幼拙,但是以后会越来越好。
我们每一次做艺术界,学艺术的同学做这样类似的报告,都有论文,你不是砸饭碗,做这些,只是提供工具,人类最早的时候一定在笔上画,有的会画在岩洞里,有的时候用木棍画,有的用毛笔铅笔。另外大家想象当年照相机发明的时候,画家惶惶不可终日,画了一个月的东西闪光灯一亮这个东西就出来。但是画家活的也很好。
这个2000年发布的,这个给你一张照片,其实最主要的特点是做可以像这个人,有这个照片以后,可以生成四十个多人像这样的人,这个是日本的办公软件做,做自己的名字,做自己的贺卡等等。大家去过日本就知道,连卡特别的普及,卖菜的标签上都有漫画,而且这个在日本还是比较成功的。
以后我们做了类似于各种各样的不同的版本,你输一张照片进去,可以生成四五十个这样。还可以达到不同的。
我们做的针对欧洲人,因为欧洲人和日本亚洲人,以及其他地方脸结构属于不同的人种,带画的时候有点不一样,我们做了一些研究,这个专门针对他们来做。 这个是同事,用他的照片输进来以后,做了一组她。
除了矢量化,带光很小,比如在手机上用方便,我们同时也做象素,怎么把一个人做的很漂亮,现在的商业软件也不好做,我们这里有一个人脸模型,我们希望把人做的更漂亮,漂亮与否是非常主观,我们按照中国对漂亮的理解,大眼睛,利用这样的技术给其他提供很好的基础。
这个是我们两个例子,这个在微软每一年技术报告会,像比尔盖茨和全体同事回报上一年的工作,在前年的时候,在展览卡通的时候,这是我们两个同事跑过来能不能做一个,这个是当场做,他们觉得非常高兴,蛮像她的。其实我们做了很多人。这个做的还是抓住她一部分特征。
在研发的同时,我们做了一些产品,2004—2006年,我们在日本超过1740万的用户,这是很大的数字,在中国在MSN中国版,其实在MSN服务商你都可以MSN卡通,现在还是免费,我们投六个星期,超过200万的项目,这个还是很成功,这个专利微软授权其他企业用,目前授权国内外企业,一家美国,一家台湾,还有四家是大陆的。还有更多的企业还在商谈这个事情。
刚才给大家看的是卡通版的脸,那是1.0和2.0的版本,现在做3.0的版本。今年10月份11月份会发布,在卡通动画方法,我们做了其他的工作,跟北京电影学院做了数字化卡通和动漫。另一个和北京电影学院做了X—BOX体验中心,正在尝试用动漫的手段来讲解高深的技术。这个是做的一个例子,我们讲一个计算机画画的东西,最后会用一个小孩的脸,现在把模板画好了,这是学生画的,希望通过这样一些很俏皮很好玩的东西,像更多的人普及所谓CAG的知识,这个没有画完的多品,这个作品放在研究院的网络和个人的网页上。希望能够把这个东西画的比较有意思一些。
我现在跟北京电影学院院长合作写一本书,希望这个版面设计是动画设计,希望成为第一本用动漫风格写的。希望艺术家能看懂大部分的章节,这本书希望今年年底能够做完,这是其中的一个版本。
我们还做了一个工作,希望模拟一下,画所谓的人脸拼图的风格,类似于警察拼图这样,上来一个计算机自动把这个人的找到,这是人手画的,这些照片都是日本同事,这是人手画的,这是计算机生成的,计算机生成和人手画还是有一点差异,基本上看到有一点像模像样。这几位有日本漫画里面角色的风格。以后不断做到产品里,使得大家更方便创造一些角色,帮助大家把更多的时间省下来做更优创造性的工作。
其中这些东西的应用所谓个性化的MSN上面的图标,以前大家都用这种图片,今后可能月自己的头像。MSE最近改版了,如果不改版的话,你也可以玩一玩。
此外我们也在学生怎么样用艺术家学习,做一些夸张,其实夸张更难,夸张就是对同一人,你看到陈佩斯不用夸张就笑,这是有些知识背景,基于知识让你觉得很好玩,很滑稽。还有一类完全根据几何特征,这个人长的什么样,就是用一个人的着手,描一下边缘,根据这个人来看到底怎么夸张他,我们把这个人夸张成这个样子。我们做过一些实验,有过经验和没有经验的人,同样的人用这样的工具会怎么样?夸张实际上非常主观,我们提供一个工具你可以选择你夸张的哪一部分,比如说这个形象夸张两个腮帮的地方,你可以通过这个地方不断的夸张,当你夸张两个腮帮的时候,其他的部分完全根据计算机变化的,这是一个比较困难的问题。这个线条都是计算机自动夸张,衣服和头发学生用手自己画的。我们没有做一些,这个阴影是手画上去,这个线条是夸张出来的。
|