嘿！你在视频直播什么 Twitter人工智能一眼就能看

北京时间4月29日下午消息,借助Titter人工智能团队开发的一项新技术,对流媒体直播的搜索将成为可能。

随着Titter旗下Periscope、Meerkat,以及FacebookLive等服务的发展,流媒体直播正越来越受欢迎。,视频直播通常并不会附带标签,也缺乏良好的分类。这往往是由于,在摄像头开启之前,人们并不清楚他们将要直播什么。

Titter的Cortex人工智能团队开发了一种算法,能实时识别直播视频中的内容。例如,算法可以知道,视频中有位明星正在弹吉他,或是正在演示一款强大的工具。

Cortex的技术负责人克莱门特法拉贝特(Clement Farabet)表示:Periscope上的内容总是在变化,而直播视频都是如此。法拉贝特演示了这项技术。对于20多个Periscope视频直播,这一技术进行了实时标记。

识别视频直播中的内容,这类技术正越来越受关注。近几年,研究人员开发了多种算法,用于识别静态照片中的对象。不过,识别不同质量视频中的内容更困难。视频的实时识别需要强大的计算能力。

Titter成功开发了一台订制的超级计算机。这台计算机基于GPU(图形处理单元),能进行视频分类并展示结果。在从事与深度学习相关的数学计算时,这些芯片非常高效。但一般情况下,它们只是大型计算机系统的一部分。

专注于内容个性化研究的匹兹堡大学教授皮特布鲁希洛夫斯基(Peter Brusilovsky)表示:即使是就静态视频而言,情况也极具挑战。而对于实时视频,这项技术需要庞大的计算能力。

他指出,业内目前急需更强大的视频识别技术。他表示:视频通常难以迅速浏览,推荐非常重要。这是视频领域缺失的一环。

目前的视频推荐技术通常是根据用户的品味向其展示相关视频。这样的推荐常常不准确,而直播视频也无法采用这种机制。

Titter视频直播服务Periscope

Cortex团队希望开发更精确的推荐系统,基于用户此前的活动向他们推荐内容。

该团队开发的视频识别技术尚未被用于Titter的任何产品。不过,Periscope已开始测试这项技术。这项技术基于深度学习算法,而视频标记中包含复杂的语义理解。例如,一段小猫的视频中可能出现的标签不仅仅是猫,还会有动物和哺乳动物等。