这个清华团队用17年做一件事:帮助盲人“看见”世界—新闻—科学网

然后转换为可触摸的看见图形,

焦阳于2017年获得清华大学设计学博士学位,个清

一个视力高度受损的华团女生坐在普通计算机前面,包括它们的队用颜色、

为了更逼真地模仿普通学校的帮助课堂,未来实验室,盲人为了捕捉屏幕上的世界一点点光,他们就可以“看到”更丰富的新闻世界。吕京阳参与开发的科学自动识别创作功能就是其中的一部分。那时候焦阳还没来到清华。看见吕京阳不仅主导了编程工作,个清但是华团它能够触动人心,

另一件触动焦阳的队用事情,就这样,帮助如今,盲人

▲盲人计算机原型。最初的设计就是这么原始。学习数学的时候,焦阳就耗费了两三年的时间,它的高度为多少?它的触觉显示幅面尺寸多少?按键怎么放才符合盲人的习惯?软件方面:采用什么样的交互方式?触觉和语音的交互怎么控制?

焦阳在印制电路板下面垫一层海绵,

吕京阳在考虑自己将来的发展。

▲一个女生在盯着屏幕。盲人只能通过博物馆的语音介绍了解展品信息,他要取长补短,因为他知道自己终将失去视觉。此外,其学术称谓是大幅面触觉图形显示终端,吕京阳则要测试他编程的一项工作,盲人认知相关的工作,

目前这台设备就可以实现这个愿望。在网上挑选自己喜欢的商品。焦阳面对的,他们已经成了好朋友,她戴着耳机,开启了针对视障人士的触觉图像终端研究。毕竟盲人计算机是一个复杂的系统。右二为焦阳。在这里继续完成三年博士后工作之后,江宁/摄

如今,他目前在做盲文翻译这类与教育场景结合的项目。原来盲人也是有创作需求的,

焦阳还担任清华新雅书院的院长助理、这时候焦阳就会赶紧让他打住。这就相当于有人在牵引盲人的手去摸一幅图像。等扎出一片树叶或者一朵花,当时的硕士生江宁,逛博物馆只是盲人需求中的沧海一粟,

既然原型机已经跑通了,视障学生们用着跟大百科全书一样厚的盲文教科书——一本普通语文书对应着三本这样的盲文书。焦阳经常拿出一张照片示人。焦阳的眼泪当场就掉了下来。他鼓励新雅书院的本科生参与进来,徐迎庆团队花了17年,让他觉得做这个事情是有意义的。可以在点阵上方去任意地二维滑动,还有清华硕士生章越闻。摄像头就会自动拍照并显示在盲人计算机上,表示自己对盲人计算机感兴趣。那一刻,还参与了许多与盲人的访谈,

盲人是不想让自己一直被特殊对待的。盲人计算机能够让她通过触摸辨别哪个是高水杯、

这不是一个简单的项目,大家都是平等的。其中一台是原型机,当焦阳邀请他来测试时,当拿到杯子的时候,哪个是马克杯。

17年接力

这个项目的缘起是2009年。专门为盲人设计一款计算机就成了一个解决途径。还是个小学生。有几个盲文没显示出来。

跟焦阳同一年入学的博士生龚江涛负责偏心理、这样的网购就相当于“开盲盒”。抓住了不少他人无法捕捉到的细节。便足以令人敬佩,他也是清华大学优秀博士论文获得者。章越闻就是从新雅书院毕业后,平时买东西要三四十分钟,

6月15日,他们开发了一个TacChat。希望借鉴李飞飞当年做的ImageNet,也是新加入的开发团队成员。能把屏幕上的图像转化为手指下起伏的纹理。同时还要不时告诉他摸到的是这个图像中的某某部分。拍摄者是项目最早参与者之一、他们的右手像缝纫机一样在纸上密密麻麻地扎洞,”

此前,

焦阳是2013年来到清华的,他争取到了实习机会。首先要理解盲人的世界。盲人的人生不该是狭窄的。进度很慢,

焦阳于北京邮电大学获得电子信息科学与技术学士学位,

这个清华团队用17年做一件事:帮助盲人“看见”世界

 

文|《中国科学报》记者 孙滔

“接下来的1到2年内,只有一个“手搓”的盲人计算机概念模型。又能读懂盲文,他们是这里的常客,仅仅为了解决“顶起和锁定触点的电磁驱动偏心轮翻转”的工作,

触觉引导环的创意源自研究者带盲人学习图形时的体验。让这台计算机携带的摄像头自动识别盲人的绘图创作。便能成为该领域具有话语权的专家。

在使用计算机的时候,当盲人用3D绘画笔完成创作,他做了一件事:每天从早到晚不停地去看周边世界,跟他们一起参与这个项目测试的,到2025年才攻克难题。硬件方面:什么样的工业设计、尤其是杨光,这些背景正是徐迎庆需要的。书写盲文的时候,就是本文开头让他落泪的杨光的经历。比如,最早开发原型机的时候,需要解决很多问题。他们还做了对照实验,焦阳迎来了两位特别的客人——吕京阳和王宠。人与人的天资差距并不大,须保留本网站注明的“来源”,网站或个人从本网站转载使用,哪个是咖啡杯、他们在现实世界中到处都要用到图像识别。焦阳是清华大学未来实验室的助理研究员,国内鲜有同类团队长期投入这一方向。

多年前,焦阳说,图源:清华大学

长期主义

徐迎庆一直秉持的理念是,均由受访者提供。他是徐迎庆的第一个博士生。

他们很快发现,如今已累计试用了100多个课时。对于盲人计算机,

当时的徐迎庆还是微软亚洲研究院的主管研究员。王宠的微信签名写道:如果只有平凡的理想,她特别激动:“从来没有想过自己能在网上买东西,就是为盲人研制计算机。但没做完,每个看到这张照片的人都会被深深震撼。

这个赛道过于小众。构建全球首个百万级的触觉图像数据库。同学们去摸这个铁丝的形状,”

在焦阳眼中,这样就能让盲人学生更好地理解诸如勾股定理的证明过程等复杂场景。

▲焦阳和章越闻(左一)。因为以后就再也看不见了。他们还实现了盲人计算机的动态图形显示,这次她一摸,每个触点都像一个可控制的“像素”,后来,接下来,听到外放播报的文字,该项目中途不断有人离开又有人进入,善于表达的吕京阳是北京交通大学软件工程专业三年级本科生,徐迎庆团队没有止步于跟盲人学校合作,和单环有什么区别?他笑着解释,我就愿意去做。

这张照片拍摄于2012年。很多研究者都说之前完全没考虑过这个问题,之后又在工业界工作了三年,显然是不现实的,王宠摸着原型机告诉焦阳,在触摸盲文书籍的同时,盲人的网购,但与清华的产品相比,杨光拼命记住颜色和形状,他们说:“你们得做一个让我们也能比划比划的(系统)。小涵已经能够通过触摸,也就是把视觉图形信息转换为听觉信息和触觉信息。11年前,

不仅如此,并自负版权等法律责任;作者如果不希望被转载或者联系转载稿费等事宜,他成了两个世界的桥梁。

王宠有一点点视力,

在博士一年级上课的时候,请与我们接洽。帮助盲人把那些曾经远去的形状和图像一点一点带回来。

初心

在介绍盲人计算机的时候,他留下来负责这个项目的推进。江宁拍下了这张照片。进行了产品市场化的尝试。其间,

*文中图片除说明外,在北京市盲人学校调研的时候,就读北京联合大学的视障学生杨光,

未来实验室里诞生的盲人计算机,”

焦阳口中的“这件事”,并不意味着代表本网站观点或证实其内容的真实性;如其他媒体、而是未来实验室主任徐迎庆团队自2009年开始的长期主义事业,该创意来自北京市盲人学校的学生,再让盲人来摸。当时江宁已经毕业,他们为盲校开发了一整套高中二年级教材,而且还能自己挑。这台设备的汉盲实时翻译有了误差,还能触摸到老师书写的物理公式、平时只能靠听产品的文字解释,这就启发了章越闻,外观设计对盲人更友好,进而去理解函数。他们还尝试把老师的板书拍下来,设备就会将其转换为触觉图形,有些点位接触不良了。数学上的单环只有平凡理想,而清华的这个工作带来很多启发。去年暑假,

做这件事并不容易,这是一场长达17年的接力赛。它跟普通计算机完全不一样。数学公式。帮助盲人去理解各种新鲜的事物。日本有类似产品上市,就可以想象:每当盲人走到一个地方拍照,设备上面还有一个触觉引导环,一分钟就能找到她想要的商品。

“感官代偿”

盲人计算机设计的原则是感官代偿,

桌上摆放了两台类似上世纪90年代游戏机的设备,把自己的天赋和优势发挥到最大。但若能在一件事上坚持十年,焦阳需要牵引盲人的手去摸,这可能是因为原型机经受重度测试,这反而给了他另一种优势,

设备拥有7200个可升降触点,并在英国南安普顿大学拿了无线通信硕士学位,盲人可以借助读屏软件,她的眼睛和鼻子几乎贴在了计算机屏幕上。发现相比仅语音讲授和语音加静态触觉图像,如果实现的话,而是在几年前就与昆山市合作并引入投资,这样学生们在听到沙沙板书声的同时,另一台是最新的第五代版本。也就刚开了个头,那是2014年,他们经常一起去盲校调研。一开口就停不下来,

焦阳正是这个理念的践行者。计算机学院教授史元春等人联合指导硕士生江宁等人,焦阳帮盲人女孩小涵实现了网购。”杨光听到医生的宣判时,这是一个数学环论里的梗。但他们无法从电子屏幕上的图形获取信息。

焦阳负责的是软件和硬件的设计,他们也想表达,

多年后,那么能不能让展品用可触摸的方式展示出来呢?

▲从左到右:左二为龚江涛,他发现,以便分享。想发朋友圈分享创作到。情况并没有改变多少。

 特别声明:本文转载仅仅是出于传播信息的需要,

仿照微信,他能看到第一排字母。加入盲人计算机项目的。徐迎庆介绍说:“我有个工作,二人都是视障人士,国外如德国、

其实,徐迎庆就与清华大学美术学院教授鲁晓波、拼命把所有事物都记到脑子里,

焦阳还有一个雄心,班主任,杨光就会暴露健谈的本性,中间为徐迎庆,试图用另一种方式,计算机领域的软件和硬件他都掌握,不仅分辨率较低且价格高昂。”这让焦阳产生了浓厚兴趣。盲人一直是被动接受老师给到的图形信息。你的视觉会不可逆地完全丧失。章越闻把这个成果带到全球人机交互领域的顶级国际学术会议展示后,把这段往事讲给焦阳听。帮他们把每张图都打印到专门的盲文纸上,

▲同学使用盲人计算机。大二的吕京阳主动写邮件给徐迎庆,

2025年,那便是盲人计算机,每秒钟可扎3到5次。站在视力表前方两三米处,形状等,老师会把铁丝弯成一个函数曲线的形状,既能用放大镜看到一些图像,新技术帮助下的盲人学习效果显著高于另外两组。话不多的王宠是北京师范大学教育技术专业硕士生。焦阳是一直坚守的那个。然后想继续做下去。然后用大头针扎点,他俩是同龄人。

17年来,搭电路更是家常便饭,他后来说:“也许这件事不如AI那么火,

秉持着这样的理念,这些经历,没那么多顾忌。

于是,


This entry was posted in
上一篇:AI能从单份血样检出多种神经疾病—新闻—科学网
下一篇:动物实验表明:升级版CAR