软件可以识别家庭视频中最精彩的部分,并删除无聊的部分

软件可以识别家庭视频中最精彩的部分,并删除无聊的部分

无论如何,谁愿意看到你的孩子玩 iPad 的整整两分钟?计算机科学博士生赵斌声称他甚至从未看过自己的录像。“我的手机上有很多视频,但现实情况是,我几乎从未回头看过这些视频,”他告诉《大众科学》 。“主要原因是视频本身可能长达五到十分钟。”

赵和他的导师、卡内基梅隆大学的 Eric P. Xing 想出了一个有趣的解决方案。他们创建了一种算法,可以识别视频中无聊的部分并将其剪辑掉。最终产品就像是一个小小的精彩片段。用户甚至可以指定他们想要的片段长度——比如 30 秒。更容易理解。“我们的动机是人们不想看原始视频,”赵说。

赵和星并不是第一批尝试自动识别视频中有趣或重要部分的计算机科学家。许多研究人员和公司正在努力开发软件,以便在监控视频中发现正在发生的异常活动。至少有一家公司表示,它出售一种可以做到这一点的系统,但研究仍在进行中。一个重要场景识别程序也可能是社交媒体公司的福音:想象一下,能够制作精简、简洁的视频与你的互联网朋友分享。

“我们的动机是人们不想看原始视频。”

新算法的工作原理是创建一个“字典”来解释它在处理视频时看到的内容。然后,它会时不时地问自己:“我能用我的字典解释现在发生的事情吗?”如果答案是否定的,这表明视频中正在发生一些新的、令人兴奋的事情,所以算法会记录下来。算法不需要看完整个视频就可以开始整理精彩片段。这与赵和星使用的编码技术一起,有助于算法更快地运行。

赵立坚表示,他的新算法速度异常快,在选择摘录场景方面与人类相似。它可以在一到两个小时内处理一段一小时的视频,而科学文献中发表的类似算法则需要 10 到 20 个小时。为了测试算法是否像人一样选择“有趣”的场景,赵立坚和杏要求三个人观看视频,并从视频中选择要突出显示的片段。然后,计算机科学家检查了人类和算法的选择有多接近。在 20 个个人视频中,有 18 个视频的赵立坚和杏的算法做出了比他们测试的其他三个竞争算法更像人类的选择。两人还检查了五个安全类型的视频,例如人们进入地铁站等场景。他们发现他们的算法和另一个算法的表现优于其他算法。赵立坚本周将在电气和电子工程师协会主办的一次会议上展示他们的研究结果。

赵先生现在计划创办一家名为 PanOptus 的初创公司,将他的软件商业化。PanOptus 的 iPhone 应用程序和 API 正在开发中。

看一下 Xing 儿子的视频中算法的具体工作原理:

<<:  哈雷戴维森推出了一款真正的 LiveWire,也被称为其首款电动摩托车

>>:  为什么最高法院认为流媒体就是有线电视

推荐阅读

《凤凰》的魅力与评价:宏大的故事与美丽的画面的融合

《凤凰》:关于永生和人类生存状况的宏大故事■ 公共媒体剧院■ 原创媒体漫画■ 发布日期1986年12...

新的地面室内定位技术精确到几英寸

室内导航无疑是定位系统制造商目前最热衷的领域。GPS 等卫星定位技术在露天环境下效果极佳,因为卫星发...

5 个 MacGyver 黑客攻击你应该在家尝试,以及 2 个你真的不应该尝试

电视节目中充斥着各种厉害的秘密特工。但只有其中一人进入了牛津英语词典。《百战天龙》中的主人公MacG...

世界上最先进的建筑材料是木材

十月初的一个阴天,建筑师安德鲁·沃夫 (Andrew Waugh) 绕着伦敦东区肖迪奇 (Shore...

尤里·米尔纳是谁?

尤里·米尔纳今天将发布重要声明。如果这个声明让您疑惑“尤里是谁?”那么我们可以为您解答。让我们从最基...

在手机上观看电影和电视所需的应用

本文已更新。最初于 2017 年 6 月 5 日发布。就在 10 年前,坐下来用手机看电影还是不可想...

伊隆·马斯克仍然相信我们生活在模拟中,但其他人并不那么确定

埃隆·马斯克并不经常发推文,但每当他发推文时,他都会分享一些关于他的世界和思想的见解。马斯克今天在推...

如何在任何设备上复制图片中的文本

普通社交媒体时间线上充斥着来自其他平台的表情包、信息图和截图。因此,您在网络上阅读的很多文本实际上并...

小千与胡子男:深入解析感人的故事和人物魅力

小千与胡子男 - 温馨短篇动画的魅力《小千与大胡子叔叔》是一部时长五分钟的短篇动画系列,于 2004...

一辆自动驾驶的 Uber 在亚利桑那州撞死了一名行人

更新时间:2018 年 3 月 26 日:亚利桑那州州长 Doug Ducey 在今天发表的一份声明...

Teku Teku Kids 第 1 季的吸引力和评论:儿童动漫的新标准

Teku Teku Kids [第一季] - Teku Teku Kids 《Teku Teku K...

旅行者号探测器进行虚拟调试,以保证数十年的任务顺利进行

出乎意料的是,旅行者 1 号和旅行者 2 号在穿越太阳系近半个世纪后仍然运行良好。为了提高探测器继续...

科学家们正在对树木进行湿树皮比赛,以了解冰暴的影响

冰冻的树枝是研究冰暴对森林影响的一部分。Lindsey Rustad Lindsey Rustad ...

日本最佳男人的灵魂 - 描述终极男子气概的动漫评论和推荐

日本第一的男性精神 - Nihonichinootokonotamashii - ■ 公共媒体电视动...

《骷髅13》的魅力与口碑:深入了解传奇狙击手的世界

骷髅13 - 骷髅十三 - ■ 公共媒体电视动画系列■ 原创媒体漫画■ 播出时间2008年4月12日...