清华x-lab ACT TALK课堂:带你探寻科技与艺术的结合

2017年10月25日晚,由清华x-lab主办,清华大学经管学院、人文学院、美术学院等院系的教授联名发起的“ACT TALK | 艺术·创造力·科技讲座系列”在清华大学经济管理学院伟伦楼409教室举办。清华大学电子系教授窦维蓓、清华大学电子系97级校友米谟科技创始人向奕裴、清华x-lab执行主任毛东辉出席了本次讲座,与80余位清华师生一同交流探讨。

据了解,“ACT TALK |艺术·创造力·科技讲座系列”是由清华x-lab主办,来自清华大学经管学院、人文学院、美术学院等院系的教授联名发起,通过邀请各领域名人学者演讲互动,打破学术专业和产业领域界限的同时,引导学生跳出思维定式,学习并掌握艺术创造力和科技创造力的“思维平衡” 。该讲座系列重在激发学生和团队的想象力、创造力和行动力,从而创新出艺术与科技的美好结晶,最终通过商业化的推动拥有广泛社会影响力。从活动立意到形式呈现将充分体现清华x-lab学科交叉、探索未知、体验式学习与团队合作的教育理念。

清华x-lab执行主任毛东辉介绍道,清华x-lab是依托经管学院,面向全校的学生、校友和老师的关于创意、创新、创业的教育平台,致力于清华大学创新人才的培养,支持学生通过基于项目团队和行动的学习获得自我成长与提升。

清华大学电子系教授窦维蓓讲道:“声音艺术通过音频技术进行创作、表现和传播,同时音频技术的创新源动力来自声音艺术的感觉与想象。听觉感知实际上是评价音频技术的金标准,并通过听觉感知从而获得在音频技术方面的启示。”窦维蓓教授长久以来在从事交叉学科的研究,从电视专业到数字电视、数字音频、医学影像、音频压缩等领域都颇有建树。正是在这些跨学科研究的过程中,窦教授深刻认识到声音艺术和科技创新的密切关系。

窦维蓓教授认为,“声”和“音”是不一样的,声是振动的机械波,而音是一个时间序列,且这个序列能够被人听到,感受到,才称之为音。当我们能够感知到声音里面的内容和情感时,它才能被称之为艺术。声音艺术在传递的过程中,依赖于对声音的采集、存储、处理、传输和高质量的呈现。

此外,音频技术对技术有着较高要求,这些技术的评价判断也需要声音艺术和对声音的感觉。国际电信联盟给出的测试标准都是客观的评价标准,但客观评价不能作为金标准,跟人耳感觉是不一样的。主观评价才是金标准,即通过不同人群对于不同的音频素材进行试听和打分。

接下来,清华大学电子系97级校友、米谟科技创始人向奕裴向大家分享了他在声音艺术与技术相结合领域的一些探索。向奕裴首先鼓励在座的学生们参与跨学科研究,他认为,跨学科思维是随时都必须要具有的,因为跨学科思维可以带来不少启发,突破很多壁垒,这种思维方式可以让你不断获益。

之后向奕裴又谈到了XR(VR/AR/MR统称XR)的声音,目前的虚拟现实可以把画面虚拟出来,你可以在两块屏上看到一些画面,但声音也需要升级。XR的声音需要创造虚拟的声音环境,以至于用户在环境里互动或者头扭动的时候声场环境还像真的一样。沉浸式的体验加上互动,具有这两点才能成为XR的声音。

全景声的处理需要先采集声音,进行后期音乐编辑,然后再放到网上去传输,传输之后再经过解码再渲染。而米谟科技则针对整个过程进行了大量的研究。首先在渲染方面,米谟科技开发了全景声SDK,具备低延时,低功耗的特点,目前已应用于优酷的VR播放器和暴风魔镜的VR影院,另外还提供对Unity和Unreal引擎的支持。

米谟科技还开发了一款VR版的音频工作站,可以让做VR内容的人直接在VR环境中编辑声音,此外还有全景声麦克风,可以录制球面格式的音频,能够将X、Y、Z各个方向的声音拼接在一起,声场还可以用软件来调整。

最初发布于2017年11月8日