软件可以识别家庭视频中最精彩的部分,并删除无聊的部分

软件可以识别家庭视频中最精彩的部分,并删除无聊的部分

无论如何,谁愿意看到你的孩子玩 iPad 的整整两分钟?计算机科学博士生赵斌声称他甚至从未看过自己的录像。“我的手机上有很多视频,但现实情况是,我几乎从未回头看过这些视频,”他告诉《大众科学》 。“主要原因是视频本身可能长达五到十分钟。”

赵和他的导师、卡内基梅隆大学的 Eric P. Xing 想出了一个有趣的解决方案。他们创建了一种算法,可以识别视频中无聊的部分并将其剪辑掉。最终产品就像是一个小小的精彩片段。用户甚至可以指定他们想要的片段长度——比如 30 秒。更容易理解。“我们的动机是人们不想看原始视频,”赵说。

赵和星并不是第一批尝试自动识别视频中有趣或重要部分的计算机科学家。许多研究人员和公司正在努力开发软件,以便在监控视频中发现正在发生的异常活动。至少有一家公司表示,它出售一种可以做到这一点的系统,但研究仍在进行中。一个重要场景识别程序也可能是社交媒体公司的福音:想象一下,能够制作精简、简洁的视频与你的互联网朋友分享。

“我们的动机是人们不想看原始视频。”

新算法的工作原理是创建一个“字典”来解释它在处理视频时看到的内容。然后,它会时不时地问自己:“我能用我的字典解释现在发生的事情吗?”如果答案是否定的,这表明视频中正在发生一些新的、令人兴奋的事情,所以算法会记录下来。算法不需要看完整个视频就可以开始整理精彩片段。这与赵和星使用的编码技术一起,有助于算法更快地运行。

赵立坚表示,他的新算法速度异常快,在选择摘录场景方面与人类相似。它可以在一到两个小时内处理一段一小时的视频,而科学文献中发表的类似算法则需要 10 到 20 个小时。为了测试算法是否像人一样选择“有趣”的场景,赵立坚和杏要求三个人观看视频,并从视频中选择要突出显示的片段。然后,计算机科学家检查了人类和算法的选择有多接近。在 20 个个人视频中,有 18 个视频的赵立坚和杏的算法做出了比他们测试的其他三个竞争算法更像人类的选择。两人还检查了五个安全类型的视频,例如人们进入地铁站等场景。他们发现他们的算法和另一个算法的表现优于其他算法。赵立坚本周将在电气和电子工程师协会主办的一次会议上展示他们的研究结果。

赵先生现在计划创办一家名为 PanOptus 的初创公司,将他的软件商业化。PanOptus 的 iPhone 应用程序和 API 正在开发中。

看一下 Xing 儿子的视频中算法的具体工作原理:

<<:  哈雷戴维森推出了一款真正的 LiveWire,也被称为其首款电动摩托车

>>:  为什么最高法院认为流媒体就是有线电视

推荐阅读

今天有 27 美元的早餐三明治机和其他美味优惠

如需了解更多交易和产品信息,请查看我们的专属 Facebook 群组。...

看看俄罗斯的新型“阿玛塔”坦克[信息图]

坦克很少能活到下一场战争。第一次世界大战停战协议签署后,第一批装甲笨重的战争机器就过时了。第二次世界...

美国太空港简介

进入太空变得越来越容易。对于任何愿意用大量现金换取离开大气层几分钟的人来说,这里有一张方便的美国所有...

《细菌进阶》的魅力与评价:不容错过的动漫体验

细菌进阶 - 动漫不为人知的历史及其魅力日本动画始于20世纪30年代,自诞生以来就诞生了大量的作品。...

哪款电动车适合您?

为 BMW i3 电动车充电。图片由 Kārlis Dambrāns (cc by 2.0) 提供想...

到 2027 年,人工智能每年消耗的能源量可能与阿根廷相当

人工智能程序的强大(尽管经常存在问题)能力是有代价的——所有计算能力都需要电力。随着世界竞相采用可持...

你的猫可能比你想象的更依赖你

你对你的宠物了解多少?《宠物通灵者》收集了你对 BFF(永远的动物朋友)的一些想法,并将它们与现代科...

使用 Prime Day 折扣购买我们最喜欢的 4K 投影仪之一可节省 465 美元

如果您想要一套真正令人印象深刻的家庭影院系统,坚果 N1 Ultra 4K 投影仪绝对值得入手。这款...

新数据显示,旅行者一号可能随时离开太阳系

根据探测器本身和卡西尼号航天器的最新数据,旅行者 1 号航天器可能比科学家们预想的要早得多,即将穿越...

高达 Reconguista in G:机动战士学院的魅力与评价 - G-Reco 甲子园完整版

高达 G 复国运动 机动战士学院 G-Reco 甲子园 - 高达 Gino 复国运动 机动战士学院 ...

图表:飓风如何变得更加极端

长期以来,气候学家们都不确定全球变暖是否对飓风和热带气旋等大规模风暴有影响,但近年来他们已经确定,气...

观看重型无人机完美地将货物运送到海上风力涡轮机上

一架翼展与信天翁相当的自主无人机目前正在为北海的一座大型海上风电场进行货物补给试验。这架无人机由丹麦...

电池爆炸前内部发生的情况

从 Note 7 起火事件到悬浮滑板爆炸,锂离子电池近来表现不佳。一项新研究有助于解释这些流行电源如...

老化反应堆在最后一次欢呼中创下新的聚变能量记录

经过 40 年的核聚变里程碑,欧洲联合托卡马克反应堆 (JET) 设施终于在 2023 年 12 月...