00后之光:4名高中生开发的这款App,让视障人群重获出行自由
00后之光:4名高中生开发的这款App,让视障人群重获出行自由
学术头条
· 刚刚
愿如繁星点亮你黑暗的世界。
图片来源@视觉中国
文丨学术头条,作者丨奇仔,编审丨李雪薇
你体验过盲人的世界嘛?是一片漆黑还是充满了马赛克?
我们每天所见都习以为常:白天灰色的混凝土森林,夜里五彩斑斓的霓虹,如果我们失去了这些习以为常,生活又会发生什么改变?
腾讯天美团队曾经就开发过这样一款还原盲人眼中世界的游戏——《见》,除了必要的操作轮盘和象征触感的白色轮廓,《见》几乎全部都是由黑色组成,玩家需要扮演一名盲人,用盲杖和摸索的方式感受物体轮廓,寻找出行的道路,体验盲人一天的生活。
尽管开发团队还是适当调整了通关难度,但在视野近乎为盲人世界的游戏中,依旧无法容易地完成游戏任务。
然而事实上,盲人的生活要比游戏中的体验更加艰难。我们很难做到对他们的不易完全感同身受,但是尽可能地为他们提供帮助势在必行。
近日,为了帮助视觉障碍人群更好地生活,一群高中生就打造了这样一款针对视障人群的 iPhone 应用程序—Athiea。
图 | 团队成员(来源:atheia.org)
Athiea 可以观察用户的环境,提高用户的空间和安全意识。它的面部识别功能可以识别家人和朋友,内置文本阅读器,可以扫描单词并大声朗读。而扫描功能可识别、计数和精确定位用户视野中的物体。
它还可以跟踪自己的观察结果。用户可以询问所需物品的位置,Atheia 会用其所处位置、上次被识别的时间以及附近的物体来回应用户的提问。
此外,它的搜索功能还可以通过给与用户触觉反馈和音频指令引导用户找到环境中的物体。
图 | 操作过程(来源:IEEE Spectrum)
启发:计算机视觉
“我们注意到,计算机视觉领域已经达到可以非常准确地检测物体,并像人类一样描述场景的地步,”Choi 说。“受到该技术的启发,我们改善了技术的可及性,使得其更好地应用到为视障人群提供视觉辅助这一现实场景中。”
Atheia 可以回答许多真实世界中的问题,例如物体的形状和大小或一天中的时间。
当感到自己处于危险的环境中时,用户可以通过语音命令或按下按钮来激活应用程序的哨兵模式。Atheia 将开始录制视频,向紧急联系人发送实时更新,并向联系人提供用户的位置。
这群年轻人于 2019 年开始着手该项目的研究。在获得工作原型之前,他们尝试了许多不同的产品形式。
该应用程序现在正由马里兰州盲人工业与服务公司的志愿者进行测试,这是一家位于巴尔的摩的非营利组织,为该州的视障人士提供培训和职业资源。
为这群优秀的年轻人进行指导工作的是 IEEE 成员 Pamela Ahn,她是学校电子研究实验室的主任,也是 IEEE Richmond (Va.) Section Women in Engineering affinity group 的创始人兼总裁。
“这四个孩子想为世界带来改变,”Ahn 说。“他们想帮助别人,这是从一个非常无私的立场出发的。他们很聪明、很勤奋、很专注。”
技术的构建
这款 APP 以信息处理渠道、搜索和避障算法,旨在达到低延迟和高精度执行用户请求的目的。该应用程序使用最新的计算机视觉模型和机器学习技术来提高其对对象进行分类的准确性。
它还包括一个领先的对象检测模型,一个用于视觉和语言研究的多模态框架,一个视觉问答程序和一个文本识别算法。
数据在移动设备上本地处理,而不是通过云服务进行处理,所以无论是否有蜂窝信号,都可以满足用户请求。
“通过测试,我们意识到无论用户身在何处,服务才是最重要的,”Ravella 说。"将我们庞大而沉重的计算机视觉模型转换为可以在 iPhone 上运行是一个巨大的挑战。但是,多亏了iPhone的神经引擎,让这一切有了实现的可能。"
Ravella 说,该应用程序目前仅在 iOS 上可用,因为 iPhone 是测试该设备的人中最受欢迎的,并且该软件具有更多的辅助功能。他说,它还允许同学们将硬件开发转移到苹果身上,更多地关注软件,因为苹果拥有出色的 iPhone 相机、深度技术、处理能力和电池寿命。
市场上的盲人辅助设备可能高达 6000 美元,但 Atheia 用户每月只需花费约10美元的订阅费即可。
重视用户反馈
同学们第一次尝试使用辅助设备时戴着带摄像头的手套,但这次实验并没有成功,因为它是在没有潜在用户输入的情况下设计的。
“我们陷入了一个许多人都会遇到的陷阱,”Choi 说,“我们首先创建了一个解决方案,然后找到了匹配的确切问题,但这些问题并不是你用这些设备应该去解决的问题”。由于 疫情的限制,他们无法进行面对面的采访,于是孩子们在 Facebook 上发帖寻找有视力障碍的志愿者,向他们咨询视障人群的首要需求。
图 | Nafi(左)和Choi(右)正在将显示 Atheia 应用程序的 3D 打印原型手镯的部件粘合在一起。这是该团队测试但被否定的六个原型之一(来源:IEEE Spectrum)
“他们愿意给我们反馈,还激励我们不断创新,对我们的研究十分期待,”Ravella 说。
根据这些反馈,团队放弃了手套,开始开发腕戴式和头戴式设备,并最终开发移动应用程序。他们确保获得有关他们六个原型中每个原型的输入。
为了了解要使用哪些技术,Ahn 帮助学生从包括 IEEE Spectrum 在内的各种 IEEE出 版物中获取研究文章。
在花费数百美元购买零件并支付软件费用后,孩子们找到了合作伙伴来帮助支付开发成本。他们的合作伙伴包括 Amazon Web Services,Maximus 基金会,麻省理工学院的辅助技术部门和 Ultralytics。
年轻的研发者们对于未来的畅想
提到未来的职业畅想,四位同学不约而同地表示,他们都打算从事 STEM 职业。
Ravella 说,他想研究机器学习在网络安全中的应用。在 MITRE 和哥伦比亚大学实习期间,他了解到黑客闯入物联网设备过于容易,让人十分担忧。
Nafi 想参与计算机视觉研究,其中融合了"物理学的混合体"。他曾在达特茅斯学院从事数字病理学研究。
Choi 依旧想从事计算机视觉方面的职业。他非常喜欢 Atheia 项目,以及他在乔治梅森大学(George Mason University)实习期间使用计算机视觉开发的另一个项目。
Khondaker 表示他想在人工智能领域继续深耕。他说,他喜欢开发 Atheia 以客户为中心的方面,因为“你正在结识你正在为之设计项目的人”。
目前这款 APP 已经拥有了自己的主页,里面详尽地介绍了该项目的推进过程及应用技术。
只有当你真正地陷入黑暗,感觉自己与社会脱轨,才会理解盲人朋友们的孤独感。
目前市面上a拥有视障功能的 APP 依旧存在很多问题,城市盲道规划也不被重视。而这款 APP 的出现,无疑为视障人群带来了福音。即使它看起来还略显稚嫩,但它依然是一款充满了社会责任感的好产品。
相信未来,这四位少年学有所成后,会将这款视障人群“好帮手”带向需要他们的人手里,帮助千千万万的视觉障碍人士更好地生活。
参考链接:
https://spectrum.ieee.org/iphone-app-for-visually-impaired
https://www.atheia.org/
335篇资讯
2.5万关注
学术头条
见证探索之途上的每一步重大突破
最近资讯
- 00后之光:4名高中生开发的这款App,让视障人群重获出行自由
- Nature:越运动越聪明,躺平小鼠这样做,长出更多脑细胞
- DeepMind再获突破,用AI开启理解电子相互作用之路
本文观点仅代表作者本人,钛媒体平台仅对用户提供信息及决策参考,本文不构成投资建议。
想和千万钛媒体用户分享你的新奇观点和发现,点击这里投稿 。创业或融资寻求报道,点击这里。
敬原创,有钛度,得赞赏
-
钛粉82688 赞赏了
快手史上最重要一战开场
约4天以前 -
钛粉82541 赞赏了
快手史上最重要一战开场
约4天以前 -
小小日月 赞赏了
投资人自白:被坑了1亿后,我再也不给影视项目投钱了
约4天以前 -
发家致富16390107977 赞赏了
Zillow大牛市炒房巨亏,别把人祸甩锅人工智能
约4天以前 -
小小日月 赞赏了
理想主义者自救指南
约5天以前 -
小小日月 赞赏了
爱奇艺,病在九千人
约5天以前 -
钛粉40736 赞赏了
家装互联网,困于“局域网”?
2021-12-04 18:24 -
小团子_TE7FCjF 赞赏了
我是博物馆文创IP授权专员,文史与创意桥梁的搭建者...
2021-11-30 06:34 -
钛粉57559 赞赏了
战斗浪潮和时代心事
2021-11-25 14:54 -
钛粉27830 赞赏了
网红书店近黄昏
2021-11-21 11:12 -
钛粉46586 赞赏了
元宇宙还没影,音乐巨头们为何纷纷下注?
2021-11-20 14:13 -
钛粉94275 赞赏了
煤炭暴涨下的山西煤老板:日进千万,已经富得没感觉了
2021-11-20 10:32 -
关东流匪 赞赏了
AlphaFold2爆火背后,人类为什么要死磕蛋白...
2021-11-19 11:55 -
钛粉33536 赞赏了
飞书切瓜
2021-11-18 20:59 -
钛粉64093 赞赏了
风光不再,背背佳1.77亿“卖身”,买家看中了什么...
2021-11-15 01:23 -
钛粉64502 赞赏了
风光不再,背背佳1.77亿“卖身”,买家看中了什么...
2021-11-15 01:03 -
钛粉64056 赞赏了
风光不再,背背佳1.77亿“卖身”,买家看中了什么...
2021-11-13 21:52 -
hVz19B 赞赏了
双十一被卖爆的国产网红化妆品“薇诺娜”,能否撑起9...
2021-11-12 13:15 -
钛粉77478 赞赏了
Shopify悄然登上北美电商第二把交椅,独立站是...
2021-11-12 12:59 -
赵何娟 赞赏了
基金投顾强监管来了:“大V”引流开户被叫停,各大平...
2021-11-08 20:39 -
钛粉90442 赞赏了
海底捞关店300家“求生”,餐饮业凛冬将至?
2021-11-08 15:40 -
钛粉65149 赞赏了
概念车百分百量产,丰田bZ4X凭什么?
2021-11-04 10:51 -
钛粉49197 赞赏了
剧本杀里的欲望缩影:交友、脱单与释放天性
2021-10-30 16:34 -
hNzMk0 赞赏了
海天味业官宣涨价,调味品行业迎来拐点
2021-10-21 17:15 -
钛粉70544 赞赏了
蔚小理,上飞书|钛媒体深度
2021-10-16 14:18 -
先进团队先用飞书 赞赏了
飞书首席商业官林婵:数字化能推动企业组织的变革和升...
2021-10-16 14:16 -
钛粉33131 赞赏了
飞书首席商业官林婵:数字化能推动企业组织的变革和升...
2021-10-15 20:57 -
钛粉53759 赞赏了
【书评】《硅谷创业课》:硅谷顶级投资人的创投逻辑
2021-10-06 14:26 -
hSmXxU 赞赏了
娱乐圈打工人,在边缘进出无门
2021-09-28 16:14 -
大山之子 赞赏了
2021中国餐饮营销力白皮书:企业营销的六大变化、...
2021-09-24 11:54 -
钛粉66527 赞赏了
透视防弹少年团的成功秘籍,国内偶像团体能学到什么?
2021-09-19 16:02 -
钛粉45063 赞赏了
无声的陪伴,也是一门大生意
2021-09-18 09:19 -
大山之子 赞赏了
求变的名创优品,还能怎么变?
2021-09-17 11:28 -
钛粉40333 赞赏了
“声音经济”不赚钱?喜马拉雅2.6亿月活换回20亿...
2021-09-15 19:55 -
钛粉69801 赞赏了
为了不让你被骗,公安部的国家反诈中心App操碎了心
2021-09-12 13:43 -
蒙MYH 赞赏了
比亚迪不是中国特斯拉
2021-09-09 14:23 -
钛粉28351 赞赏了
迎接中国的“波普”时代
2021-09-06 16:58 -
钛粉54471 赞赏了
靠PDF Reader成名之后,这家工具垂类公司如...
2021-09-04 17:06 -
钛粉12200 赞赏了
交易所“三胎”面世,北交所带来哪些重大机遇?
2021-09-03 18:25 -
钛粉14013 赞赏了
交易所“三胎”面世,北交所带来哪些重大机遇?
2021-09-03 16:24 -
钛粉02992 赞赏了
什么才是真正安全的“辅助自动驾驶”?
2021-08-23 11:26 -
宗旭 赞赏了
与华为分手、且长期亏损,AI芯片撑不起寒武纪千亿市...
2021-08-20 11:55 -
subey 赞赏了
抑郁症患者:深渊之中的自救
2021-08-13 23:55 -
hriyWn 赞赏了
5G时代系列谈:(四)应用之囿
2021-08-09 21:01 -
subey 赞赏了
互联网精神,不止崩于酒局
2021-08-09 08:42 -
钛粉49477 赞赏了
“中国需要什么样的资本”——一位投资人的反思
2021-08-06 09:50 -
hB9jMz 赞赏了
一个SaaS和物联网的新物种实践(下)
2021-08-03 10:51 -
钛粉54886 赞赏了
转型内容平台,迷你创想如何激励用户内容创作?
2021-08-01 12:50 -
钛粉07496 赞赏了
艺术家尹朝阳:NFT是一种新的交流方式,它可能代表...
2021-07-30 21:35 -
钛粉47967 赞赏了
安防厂商竞争加剧:华为份额不断提升,海康威视地位将...
2021-07-25 18:58 - 查看精彩文章,打开钛媒体客户端
挺钛度,加点码!
- ¥ 5
- ¥ 10
- ¥ 20
- ¥ 50
- ¥ 100
支付方式
支付
支付金额:¥6
赞赏金额:¥ 6
赞赏时间:2020.02.11 17:32
账户【未登录】提示!
个人中心将无法记录并同步您的赞赏记录,
是否进行登录
分享文章
Oh! no
您是否确认要删除该条评论吗?
猜你感兴趣
分享文章