计算机学会识别画得不好的动物

计算机学会识别画得不好的动物

几周前的一个聚会上,我接到了一项艰巨的任务,试图用图画表现“芝麻街”。我画了一个看上去最可笑的斑点,应该是大鸟,却从我的干擦记号笔上流了下来。但当我把一个卷发脸的东西放在一个看起来像垃圾桶的东西上时,有人大声喊出了答案。我们人类非常擅长猜测彼此画得很糟糕。

然而,计算机并没有那么熟练。现在,布朗大学和柏林工业大学开发了一种新算法,旨在改善这种情况。这是第一个为抽象绘画的“语义理解”而设计的计算机应用程序,研究团队表示它可以改进搜索应用程序和基于草图的界面。有朝一日,基于这项研究和其他线条画计算机识别技术,你也许可以在 iPhone 上用手指画出一些东西,并得到真正的答案。

该程序识别简单抽象素描的准确率为 56%,而人类的平均准确率为 73%。即使是那些非常缺乏逼真度的素描也能被检测到,这是这里的关键突破。计算机已经可以识别准确的素描,例如,将警方绘制的嫌疑人素描与面部照片进行比较。但对于我们成长过程中接触的抽象素描类型,这是一个不同的挑战。

想想看——如果有人让你画一只兔子,你可能会画一只长着大牙齿、大耳朵和夸张胡须的兔子。其他人很容易就能认出这种卡通形象,就像我的朋友能看懂我抽象版的奥斯卡·格罗奇一样。但它实际上与真实的东西没有任何有意义的相似之处,所以计算机根本不知道它是什么。这有点像训练沃森玩“危险边缘!”——人类可以分辨出一些微妙的技巧和含义,但对于建立在黑白、1 和 0 的世界里的东西来说,这是一个艰巨的挑战。

布朗大学计算机科学助理教授 James Hays 和柏林工业大学的 Matthias Eitz 和 Marc Alexa 着手解决这个问题。他们设计了一份人们可能想涂鸦的日常事物清单,确定了 250 个类别,并使用亚马逊的 Mechanical Turk 众包平台聘请了一些素描艺术家。他们收集了 20,000 幅独特的素描,并将它们输入现有的机器学习算法中来训练系统。该项目最终形成了一款有趣的实时计算机画图猜词游戏,其中系统会在人们画出物体时尝试识别它们。请在页面底部观看它的实际操作。

有些图画非常有价值,而许多计算机猜测则非常搞笑。您可以在此处查看整套图画。其中一些图画非常受欢迎:长颈鹿的惊人准确性、海绵宝宝的创造性以及龙虾的惊人不准确性,龙虾就像狗一样,似乎什么都长得像。

为了扩大数据集,该团队正在考虑将这一概念游戏化,使其成为可以在 iOS 或 Android 设备上玩的游戏。目前已经有了 iPhone 应用程序,您可以在此处下载。

研究人员表示,他们的目标是改进基于草图的搜索。这可以提高计算机对语言、动作或读写障碍人士的可访问性——而且它还可以用于任何语言。该团队上个月在 SIGGRAPH 上展示了他们的项目。

[布朗大学供稿]

<<:  驾驶创新:安全带

>>:  用这款新字体在星空中写下你的名字

推荐阅读

大量蜗牛入侵佛罗里达,可能是为供萨泰里阿信徒饮用而进口的

上周,在佛罗里达州盖恩斯维尔,专家们齐聚一堂,参加非洲大蜗牛科学研讨会,讨论佛罗里达州最新出现的令人...

卡利梅罗的吸引力和声誉:这个受人喜爱的角色背后隐藏着什么秘密?

卡利梅罗:黑人女孩的梦想与挑战概述Calimero 是一部日本动画电视连续剧,于 1974 年至 1...

看看这架争夺下一任黑鹰的直升机

两种截然不同的未来飞行器设计正在相互竞争,以成为陆军的下一代黑鹰型直升机。它们都挑战了人们对直升机外...

2017 年最振奋人心的科学故事

当你回顾一年又一年的过渡时,不妨想想那些让 2017 年成为伟大一年的科学和技术故事。以下是让我们微...

Fitbit 的 Alta 为休闲可穿戴设备用户提供 130 美元的选择

在专门用于跟踪健身情况的腕戴式设备中,Fitbit 是最受欢迎的。Fitbit Flex 和 Cha...

使用 3D 打印组件从头构建机械键盘

机械键盘风靡一时,原因很容易理解——能够真正击中键盘,听到咔嗒声,并且高度可定制。如果你想用这些小工...

涡轮机从空气中凝结洁净水并同时产生风能

一种新型风力涡轮机不仅能从风中获取电力,还能通过冷凝最干旱地区的湿气从空气中获取清洁水。据制造该涡轮...

评价《天空之鹰》:一部将壮观的空战与动人的剧情相结合的杰作动画

天空之鹰的号召力与名声——空之荒桥■ 公共媒体剧院■ 原创媒体动漫原创■ 发布日期1938 ■ 集数...

Lutron Caséta 无线照明入门套件:更智能的调光方式

该套件售价 159 美元,包含您入门所需的一切。不过,如果您不放心自己安装,请务必考虑专业安装的成本...

《看见风的男孩》评论:享受动人的故事和精美的动画

《看见风的男孩》——一个关于自然与人类共存的动人故事《看见风的男孩》是一部日本动画电影,于2000年...

深海互联网电缆可以帮助感知远处的地震轰鸣

海洋覆盖了地球表面三分之二以上的面积。对于地震学家、海洋学家和其他想要持续监测地球运动的人来说,这一...

科学家们在研究更优的塑料分解细菌方面取得了进展

不久前,分子生物学家克里斯托弗·约翰逊在一次聚会上与另一位客人闲聊,谈论他的研究,科学家们经常这样做...

掷弹兵:微笑战士 - 魅力人物和史诗故事回顾

掷弹兵:微笑战士:战国时代的新女主角和她的旅程《掷弹兵:微笑战士》是一部 2004 年至 2005 ...

《Aura Battler Dunbine》全面回顾全新 AURA BATTLER 故事

《AURA BATTLER 丹拜因 新传 AURA BATTLER 丹拜因》的魅力与评价《灵气战士丹...

观看 SpaceX 的巨型星际飞船火箭爆炸

今天早些时候,SpaceX 的巨型火箭星际飞船发生爆炸。星际飞船首次使用超重型助推器,整个火箭组件在...