两名PJH葡京会的毕业生利用他们的计算机科学知识开发了一种新方法,帮助视力受损的人安全地通过他们的环境.

他们的高级项目, Alisa 莱文 ' 21和Rahul Mitra ' 21成功地为视障人士打造了一款成本效益高的“实时物体检测辅助设备”.装在一根白色手杖上, a microcomputer with a camera uses machine learning to determine what’s in the path of a visually-impaired user; that information is announced aloud by the user’s smartphone, 是通过蓝牙与微型计算机连接的. 请参阅该项目的简短视频演示 在这里.

Alisa 莱文和Rahul Mitra 21年计算机科学高级项目
Rahul Mitra ' 21和Alisa 莱文 ' 21和他们的'视障实时物体检测辅助设备.’

莱文, 主修计算机科学,辅修模型和数据, 和密特拉, 他来自加尔各答,主修计算机科学和物理, 印度, 都将开始攻读博士学位吗.D. 在今年秋天的计算机科学课上. 莱文最近获得了2021年的国家科学基金 研究生研究奖学金.

计算机科学教授 彼得一个. 尹, 莱文和Mitra项目的指导老师是谁, 说所有计算机科学专业的高年级学生必须完成他们设计的为期一年的顶点项目, 实现, 测试一个软件系统. “今年, 第一次, 学生们可以选择小组合作, 哪一个更接近真实世界的软件开发过程,”尹说.

Mitra想做一些与硬件相关的工作, while 莱文 wanted to pursue a project that involved machine learning; their project ultimately incorporated both aspects. 这两位刚毕业的学生利用他们在PJH葡京会计算机科学课程和研究经历中磨练出来的编程和长期项目管理技能完成了这个项目.

尹说, 他们的项目实际上需要计算机软件和硬件系统各个层次的广泛知识和技能——机器学习, 无线通信, 系统编程, 和PJH葡京会程序设计, 举几个例子. 他们的工作是我近年来指导的最全面的高级顶点项目之一.”

Alisa 莱文和Rahul Mitra 21年计算机科学高级项目正如他们在他们的项目摘要中所说的,大约2.全世界有20亿人患有某种形式的视力障碍. 莱文从事这个项目的部分灵感来自《pjh葡京会app下载》, 这款PJH葡京会程序将志愿者与寻求帮助的视力受损用户连接在一起,帮助他们澄清毛衣的颜色或阅读罐子上的保质期. “拉胡尔和我讨论了一个实时物体探测助手的想法,它可以帮助视觉受损的人了解他们周围的物体,莱文说:“.

Mitra说, “这个过程使用带摄像头的便携式微型计算机上的机器学习,这样个人就不需要依赖志愿者的帮助. PJH葡京会决定将PJH葡京会的系统安装在一根白色手杖上,这是低视力人群通常使用的设备.”

摄像头和微型计算机的信息通过蓝牙传输到用户的智能手机上, 哪个将它以音频的形式传递给用户, 提醒他们前面有什么障碍. 莱文说:“这种听觉信息的一个例子是,‘一辆车和两个人’。. “PJH葡京会所用材料的总成本是245美元, 相当于WeWALK拐杖成本的41%, 目前市场上的一种智能手杖. PJH葡京会希望PJH葡京会的设备可以替代WeWALK拐杖, 并能进一步提供独特的目标检测功能.”

Mitra解释说,该项目的代码库可以在代码共享网站Github上公开. 他说:“任何开发商都可以接手PJH葡京会的工作。. “这个项目已经做了很多好的工作,PJH葡京会相信保持PJH葡京会的代码公开将帮助其他想要参与这类工作的开发人员.”

莱文和米特拉承认,他们无法从视障人士社区收集反馈, 他们认识到让能够直接受益的个人测试该设备的重要性.  “如果PJH葡京会进一步推进这个项目,他们的反馈将是非常宝贵的,可以帮助PJH葡京会规划下一步,Mitra说:. “无障碍技术目前是一个巨大的领域. 随着高性能微型计算机的发展, 我认为,机器学习与众所周知的白手杖大规模集成只是时间问题.”

莱文补充道, “PJH葡京会希望这是向机器学习增强工具迈出的良好一步,可以帮助视力受损的人在繁忙的环境中导航.”

莱文和米特拉因他们的工作获得旅行者高级研究奖, 哪个奖项认可一个表现出技术成熟度的优秀高级项目, 完整性, 和相关性. “这对大学生来说是非凡的成就,”尹永哲在谈到他们的项目时说.

“与教授合作. Mitra说:“尹永哲是一次奇妙的经历。. “PJH葡京会每两周会见一次他,他总是对PJH葡京会在项目过程中遇到的问题提出独特的观点. 我一直很喜欢他在课堂上的“边做边学”的哲学. 在他的领导下进行一个高级项目也是如此,他总是建议PJH葡京会可以采取的新方法. 教授. 尹永哲在将整个系统以友好的方式组合在一起方面发挥了重要作用。.”

从PJH葡京会毕业后,Mitra将在攻读博士学位的同时进行计算机图形学方面的研究.D. 在计算机科学中. “PJH葡京会提供的研究机会让我相信,读研对我来说是一个正确的决定,”他说. “从教授那里获得的知识. 尹的编程课程是影响我决定继续攻读计算机科学研究生的一个关键因素.”

莱文正在攻读博士学位.D. 在计算机科学中, 她计划继续将自己在机器学习和辅助技术方面的兴趣结合起来. “我非常感谢哈佛大学所有优秀的教员 计算机科学系 感谢你们在过去四年里对PJH葡京会的支持。.

阅读更多关于工程和计算机科学专业的高级项目 在这里.