纽约大学目前正在将荷兰电子乐队C-Mon&Kypski的一部音乐录影用于科学研究。单曲《多即是少》(More is Less)的这部音乐录影中包括了几千个人的画面。纽约大学数学科学研究所将其用于教计算机识别人形的电脑视觉项目。
这部动感十足的音乐录影一年半以前由艺术家Roel Wouters和Jonathan Puckey摄制。片中显示了乐队成员展示一系列姿势、手势以及面部表情。制作人利用Oneframeoffame.com网站邀请公众拍摄并提交自己模仿乐队成员的镜头。网站每隔一小时便上载一部更新版本的视频,直到包含有超过三万三千人做同样动作的画面。
纽约大学电脑视觉项目的研究人员通过谷歌搜索发现了这部录影,立刻表示出极大的兴趣。研究员Graham Taylor说:“我们要教电脑识别摆出不同姿势的人。我们还希望识别不同的人、不同的性别、不同类型的服装,以及在所有这些人摆出同一姿势时识别他们。因此这部录影非常棒,因为它恰恰包含了我们所需要的数据,即许多不同的人表现同样的姿势,但却又在各种各样的背景设置下。”
[media:video_id: (bbvms ID: @@rnw.bbvms.com/p/RNW-fullwidth/c/1137386.js)]
新理念
他们利用录影开发了一种算法,帮助电脑识别人形和动作。电脑视觉被用于游戏业、监视摄像头以及在行人面前自动刹车的汽车。
乐队成员Simon Akkermans,即C-Mon,对自己能够间接的为科研做出贡献感到非常惊喜:“这当然太棒了!我还要告诉你,我们一整年都收到各类邀请,常常是艺术项目。这部录影很快还将在维也纳双年展上亮相。事实上它刚一出现就吸引了很多人的兴趣。我觉得这并不奇怪,因为它是一种新的理念。”
独特
音乐录影与电脑视觉相结合对于Graham Taylor来说也是很新的一次尝试,同时这也为他的项目带来了极好的宣传。
“我认为电子乐队与科研人员的合作是相当独特的。这是个很有趣的项目,讨论起来也充满了乐趣,与我们通常所专注的大量乏味的技术细节完全相反。”
研究人员几乎已快完成他们使用该音乐录影的工作,研究结果预计将在今年的IEEE电子工程与信号处理国际会议上公布。