按键盘上方向键 ← 或 → 可快速上下翻页,按键盘上的 Enter 键可回到本书目录页,按键盘上方向键 ↑ 可回到本页顶部!
————未阅读完?加入书签已便下次继续阅读!
骱兔婵妆浠扛龆鞑蹲窖菰被崤浔溉傅迹蝗烁涸鹣低撑纳悖蝗烁涸鸺觳椋繁2蹲降叫Ч罴训亩鳌�
当然,这是最最最复杂的时候。
而如果是在一般的游戏之中,就比较简单了。特别是有些三渲二的游戏,人物线条比较简单,制作动作捕捉主要是身体动作,面部表情比较容易,所以需要的设备和人手就比较少了。
当然,也有需要更高级别、更高精度的那种。
就比如好莱坞。
森夏这边在扩展了好莱坞的业务之后,面部表情技术也是被大规模应用了下去。而在这边的面部捕捉,则是调用了三十二台摄像机捕捉人脸的表情变化,每两个摄像头捕捉人脸的一部分,然后将十六个画面拼合起来,最后再编辑成3d模型。
这可不是简单的活儿,甚至就这都不是一般电脑能够完成的工作,是需要大量的服务器集群、甚至超算,才能搞定的。
“要喝点什么吗?”森夏看着正在这里认真翻阅文件的绫奈,于是就问了一句。
“红茶,记得放糖。”绫奈头也不抬。
“好。”
茶具在书房就有,所以要泡茶还是挺方便的。
“我真搞不懂,为什么你们一定要用真人捕捉。既然让真人来做了演出,那直接用真人不就好了么,为什么一定要用3d呢?”绫奈撇了撇嘴,“要做的话,手工调整会更方便吧。”
“你知道恐怖谷理论吗?”森夏帮绫奈泡了一杯红茶,然后放在了她的面前。
“好像有听过。”绫奈说,“对,是那个……攻壳机动队的电影的时候。”
“这个概念是森昌弘曾教授所提出的。简单来说,就是一个机器人,越接近人类,人们对其的喜爱程度就会增加,但是当这个接近程度达到一个阈值之后,人们反而会越来越恐惧,但是,当人偶的仿真度继续提升的时候,这个恐怖,又会化为喜爱。而这个恐惧的区间,就是所谓的‘恐怖谷’。”
森夏也端起了红茶,他一边品味着红茶的清香,一边说:“当机器人与人类相似程度超过95%的时候,哪怕存在多么细微的差别,都会显得格外刺眼。而在游戏里面的表现,就是这些角色本身,会变成一个令人可怖的存在。而解决这个问题的关键——就是面部捕捉。”
森夏这边说:“最开始做面部捕捉的时候,困扰我们的问题其实也不少。举个例子,我们的摄像机的精度最开始不够,所以存在很多区域是无法被正常标记,特别是眼角、瞳孔和舌头的动作,都很难实现。在这部分,我们最开始是利用人工进行修正来调整的,但是这种做法相对而言也只能说是补救而已,效果只能说差强人意。”
“所以我们在那个时候,大部分技术用的都是三渲二。因为这类角色的建模,面部轮廓和线条,相对于真人都简单太多。”
——森夏这边最开始用三渲二,一方面是符合审美,而另外一方面,正如森夏所说,这其实是自家这边的技术限制,这让森夏他们只能寻找另外一种方法规避。
而这种规避最好的方法,自然就是用不那么真实的人脸了。
别说,这个效果还挺好的,森夏这边的互动式电影能够推广下去,这个“取巧”的动作,着实是帮了大忙。
“不过后来,我们升级了硬件设备。在爱丽丝的帮助下,我们买到了专业的数字摄像机。用这种摄像机进行拍摄,就可以得到更高精度的表情,这种方法可以更好的赋予虚拟角色灵魂和生命力,让其越过恐怖谷——这也是我们现在为什么敢接好莱坞特效业务的原因。”
“此外,影像还可以提供材质信息,这是传统的动作捕捉方式无法取得的,也是我们的优势。”
——森夏所说的方法,其实是另外一条世界线的《心灵杀手》所用的解决方案。
这种方案优点很明显,不仅可以跟踪动作,还能够显示皮肤的质地是怎样随着运动而作出相应的改变。
甚至于,这个技术除了人类形象之外,也是可以应用在动物身上的——只需要将演员的末端表情匹配到相应的3d模型上即可。
在另外一条世界线,很多动物和怪物也需要动作捕捉,其实有一部分原因也是因为这个。
森夏这边的新技术给他们带来了很多优势。
在以往,需要根据游戏/电影的角色设计,角色的体型特征,就需要选择接近的动作捕捉演员,或者根据后者定制前者。而森夏这边的技术,无论演员的身高、体型、年龄如何,都可以对角色进行调整。
这就是森夏这边之所以能搞出廉价的秘密之一——因为它大幅度降低了准入门槛。
当然,这种做法也有美中不足的地方,那就是如果不是完全匹配的话,表情之类的,有时候其实还是挺容易走样的……
“嗨嗨嗨。你们的优势很大,我知道的……”绫奈一边嘀咕着,一边继续看着资料。
这些资料都是森夏这边拿过来的非常重要的东西,但是绫奈看着的时候,却是一脸嫌弃的模样,搞得森夏这里都有些不太淡定了。
“嘛,看来我要做的工作还是挺大的……”她嘀咕着。
“呃……呵呵呵……”这个时候我不知道应该怎么面对你,所以我只要微笑就好了,绫奈酱……
等过了一会儿。
绫奈这时候才终于放下了鼠标。
“唔,虚拟角色的实时捕捉,想要实现起来也不是不可以,但是多机位协同的话……而且本人可能也只是普通的声优而已……”
毕竟不是十多年之后,有些技术问题不能依靠简单的算法和丰厚的计算资源硬堆。
更何况,森夏希望自家这边的虚拟偶像能够更加正规一点,能够更像“偶像”一点。
对于这一点,绫奈表示赞同。
偶像可不是那么容易做的。
就算是虚拟偶像,也不行!
这是一位励志成为声优,但是现在却在当程序员的偶像的心路。
正因为知道偶像是一件艰难的工作,所以在绫奈看来,这事情绝对不能随便敷衍。
不过森夏这边给出的条件还是不错的,虚拟偶像会有专门的摄影棚搭建……
“嗯……我想想。”她在思考着。
“我能帮上什么忙吗?”森夏问。
“森夏?你……唔,能做午饭么?”
“嗨,没问题!”
……
二合一的喵~
技术问题挺麻烦的,而算法这个更麻烦……
第一千六百九十五章 我们是否应该物尽其用?()
“森夏哟,其实你去当厨师也是大有前途的嘛。”
绫奈和森夏是青梅竹马,大家说话之间也比较随意。
当然,就单纯的关系而言,森夏这边距离有栖其实更近。
不过这并不是说,森夏和绫奈之间的关系就不太好。其实两人之间的关系还是不错的。
而这个时候,他们就在一起吃饭。
“偶尔试试看还不错。但如果一直做饭的话,还是挺累的。”森夏摇摇头。
他已经好久都没有和以前一样每天负责做饭了。
不得不说,有了夕颜之后,森夏整个人都废人化了……
“情况怎么样?”森夏问。
“算法可以优化。但如果要用廉价设备的话,机器性能本身还是挺麻烦的。想要实时的抠图和运算,不是什么容易的事情。”
有些算法方面的事情,绫奈是能做的。
但也有句话叫做巧妇难为无米之炊。
优化优化,所谓的优化,就是在性能有限的情况下,让效果更好。
但是,这谈何容易?
机器性能本身就是有限的,不管怎么说,想要将ps2优化成ps4,这也是绝对没有可能的。
绫奈此时已经意识到,有些抠像和绑定骨骼动作的算法,计算机是能够做出来的,但介于性能等问题,这种做法其实还是没那么妙的。
“唔……更高的性能配置啊……”森夏嘀咕着。
这还是挺麻烦的。
“廉价的解决方案,我觉得还是有的。”然而绫奈却似乎想到了什么。
“怎么做?”森夏好奇的问。
“convolutional_neural_networks。”绫奈认真的开口。
森夏嘴角抽搐了一下。
因为绫奈的这个日式英语,简直要命。
“卷积神经网络,是一种深度学习的方法啦。”注意到森夏这边微妙的目光之后,绫奈才不好意思的开口补充了一下,“为了减轻终端的压力,我们能用这种方法来进行抠图。唔,当然,如果有需要的话,我们最好自己组……嘛,不过写架构挺麻烦的,这个我可不干。”
“哦,神经网络啊,这个我知道。”
森夏也很惊讶。
“深度学习”这事情,森夏是很清楚的。
因为在未来,这种技术就是世界的浪潮。
类似森夏这边正准备给游戏主机使用的dlss技术,也可说是深度学习的一个范本。
不过森夏惊讶的并非是这件事情,他惊讶的是,绫奈这个时候竟然能够提出这种技术。
后者这个时候则被森夏看得有些不太自在。不过这个时候两人也都已经吃过了饭,绫奈姑且也就把这件事情当成饭后的谈资说了出来:“卷积神经网络,就是深度学习的代表算法之一,森夏君你们凤凰社是有做机器深度学习的,我觉得你们应该能理解吧?”
“嗯。”
森夏点了点头。
一般人或许不知道,但另外一部分自身的网民,或多或少都接触过这个算法。
在另外一条世界线中,有一个大名鼎鼎的的软件,叫做waifu2x。
“waifu”也就是“wife”,妻子的意思,这个变体是欧美的宅们为了区分和现实世界的妻子而命名的。实际上这个waifu翻译一下,就可以叫做“二次元老婆”。
而waifu2x,这是一个基于卷积神经网络的一个扩大图像的软件,针对二次元的画作,可以将画面在几乎没有多少画质损失的情况下进行放大,从而得到一张高清的放大图片。
这个放大和现如今的技术相比,那简直就是碾压。
不,是超碾压式的存在,因为这种通过卷积神经网络算法放大的图像,几乎可以在不产生模糊和损失细节的基础上,做出十分惊人的成功。
卷积神经网络也被称为“平移不变人工神经网络”,因为这类神经网络,能够进行平移不变分类。
或许有人不理解,但实际上,这也是很好理解的概念。
基本就相当于,有人将画面上的某个物品用修改软件p图到画面的另外一个,这种平移的过程,就类似于此。
当然,这是举例。因为机器和人不一样,画面变化之后,画面之中的像素所对应的权值也就跟着变了,这就导致了一系列的问题,而机器的大脑和人类也不一样,做这种运算,其实挺麻烦的。
“我曾经去见过福岛邦彦教授,教授对我的启发很大。”
“……等等,你不是偶像么?”
森夏忽然脑袋短路。
他记得绫奈似乎是偶像吧。
福岛邦彦的话,森夏其实是知道的。因为他这边就有在赞助福岛邦彦做一些研究。
至于这个福岛邦彦……咳咳,他和地名完全没有关联,也不是什么核物理学家,他其实就是神经网络的开创者之一——而在他作出研究的时候,还是八十年代,这足以说明对方的研究是多么的有前瞻性。
不过森夏更在意的是,绫奈居然认识人家?
“正因为是偶像,所以才要认真学习啊!连一点计算机知识都不懂,还怎么当偶像啊!”绫奈轻而易举的就发出的了让森夏大脑短路的发言。
“不想当程序员的偶像,不是好女仆?”森夏忽然蹦出了这么一句奇怪的名台词。
“才不是啦!”绫奈气得想用脚踹一下森夏,但森夏这边滑不溜秋的,倒是没让绫奈碰到半分。
“不说这个了。我的意识是,卷积神经网络在图像识别方面的应用非常有前景。”
卷积神经网络能做的事情很多,例如就有人用其来进行鸟类识别。
而实际上,卷积神经网络到了未来,也可以说是图像识别领域的核心算法之一,并在大量学习数据时有稳定的表现。
——当然,那是另外一条世界线的事情。至于这边的话,这个技术的应用,是森夏这边来推广的。
“如果通过这种算法的话,我们可以稍微简单一些。”绫奈没好气的说,“不过你事先需要很多的图片来训练ai。”
卷积神经网络的用途很广泛,甚至还能够在物理学上面有奇效。
当然,绫奈虽然了解卷积神经网络,但是她和森夏还有作者同样不了解这玩意儿在物理学上的应用,所以暂且不表。
不过正如绫奈所说,这个技术是能够在这方面使用的。
“是哦……”森夏回过味来了。
绫奈好像对这方面也挺了解的?
森夏并不是专业搞影视的,但绫奈的话,让森夏心中有了一点微妙的感觉——我是不是应该物尽其用?
难得绫奈的脑子这么好使,森夏一瞬间就想到了……呃……更有效率的利用方式。
……
用过waifu2x的书友们,我觉得应该也有。
这个软件真的超强大……
卷积神经网络根据使用的不同,有些是省资源的,例如dlss,但有些做起来却特别耗费资源,例如waifu2x。
作者君刚刚睡着了……暂时一更……
第一千六百九十六章 这怎么能叫肮脏的交易呢!()
“不只是虚拟偶像。我觉得如果森夏君你觉得不错的话,用来给电影使用也是很棒的。”
绫奈并没有注意到森夏这边的若有所思,而是在继续侃侃而谈。
影视上这个技术,可以用来去噪,而且电影本身的精度要求,和军工或者精密技术方面的也不一样,所以算法上可以宽松很多,精确度不需要考虑,只要让画面好看,这就够了。
顺带一提,迪士尼在这方面就非常有建树,而在另外一条世界线上面,阿凡达这边的表情捕捉,就应用到了相关的技术。
至于森夏这边,要的就比较简单了,就拿现在这边要解决的问题来说。
嗯……就是抠图。
实际上,所谓的动作捕捉,如果狭义一点的来说,其实都是抠图。
而卷积神经网络抠图,效果就很好。简直是举重若轻,在经过了训练的人工智能手上,那真的是非常不错。
但绫奈的技术,如果只是拿来抠图的话……好像的确有些大材小用了……
“绫奈,你真没考虑当程序员……不,我是说,你真没考虑去从事计算机研究方面的工作吗?”
森夏终于还是问了。
然而,后者坚定的抬起了头:“我,要当声优。”
好吧。
绫奈的声音,其实还是挺有特色的。
“咳……但是你真的挺有前途的……”
“我,要,当,声优!”
绫奈一字一顿。
森夏乖乖的闭上了嘴。
好吧,这种时候就不应该争论这个问题。
而且,绫奈愿意为绅士事业添砖加瓦,自己应该高兴才对咯……
不过可惜啊,如果绫奈愿意来搞程序、写算法的话,那就更好了。
“我们说到哪了?”森夏还是决定先把话题拉回来。
“影视方面的应用。”绫奈说。
“哦,对,你觉得这方面也能用?”森夏问。
“当然,森夏你的电影不是明年就会播放了嘛~”
好莱坞那边的大电影,外人知道的比较少,但森夏身边的人还是知道一点的。
其实很多时候,神经网络的目的不是替代真人进行工作,而是为了减少人们重复性劳作。
至于神经网络本身的话,就是一个需要深度学习的“机器人”。
绫奈刚刚说的“大量训练”,就是指的此处的学习数据。数据的输入端是计算机计算出的一个脏点云,输出端是经过人工处理后,计算机计算得到的一个规则网格——这都是来自于计算机计算的结果的,而不来源于实采数据。
通过这种方式,ai可以逐渐了解人们是如何工作的,然后他们本身也可以来进行“模仿”。
这种感觉,如果硬要找一个的原型的话,就相当于自家的小猫小狗耳濡目染之下也学会了主人的一些生活习性类似,然后,这些小猫小狗就仿照着主人去行动,这就是深度学习了。
当然,此处卷积神经网络是无法本质上降低制作成本的,因为它无论是训练数据,还是最后的应用,都是从一套十分昂贵的系统中来的。换个角度说,如果没有这套昂贵的系统而只有这个神经元网络,那基本等于没有。
在另外一条世界线,就有一种上色和换脸的软件。这类软件,都是需要使用者在机器开始工作之前,先用数千张照片让ai进行训练,最后让机器知道,什么样的构图需要上什么颜色和换什么脸。
曾经就有一位仁兄,给自己的暗恋对象拍摄了很多照片,然后训练自己的ai,然后让ai将爱情动作类影片中的女演员换成对方的模样。
然后……
然后这货就开始怀疑人生了。
这种主动把绿色的帽子往自己脑袋上戴的人,当真是世所罕见。
“如果能够让终端的成本降低,或许也不错……”
而对于森夏来说,总体成本不降低其实也无所谓。
森夏这边所需要的,单纯地研发成本其实无所谓。他比较在乎的是终端的成本。
如果通过这种方法,可以让玩家们、还有软件开发商们本身的成本大幅度降低的话,这自然是更值得的。
更何况,训练好的模型,成本是固定的。也就是说,卖的越多,成本越低。
绫奈也是知道这一点,所以才说出了这个神经网络的。
当然,关键还是这个“训练”过程。
抠图最难的是抠细节,让一个ps高手来抠一个原图,和抠一个经过算法粗抠的图,所要花费的时间没啥区别,这就是因为细节才是最繁复的地方,能够决定一�