微信邦

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 2010|回复: 0

我们做了一个小功能,让视障者也能“看见”图片

[复制链接]
发表于 2018-1-31 13:21:25 | 显示全部楼层 |阅读模式
我们做个小实验吧:拿出手机,闭上眼睛,请朋友发给你一张图片。

你要怎样才能知道图片的内容?

这年头,发张图就胜过千言万语。但对于视障用户来说,就不是这么回事了。

我们知道,许多智能手机里都有读屏功能,可以让视障用户听到文字。

我们做了一个小功能,让视障者也能“看见”图片

我们做了一个小功能,让视障者也能“看见”图片
安卓和ios系统都有视障辅助功能

但很多时候,文章中的配图、好友动态里的照片,是“读”不出来的。视障用户只能听见“图片”、“图片”、“图片”......

那么,我们能不能让图片“说话”呢?



在最新安卓版QQ空间APP中,我们做了一个尝试:增加了「图片语音即时描述功能」。它能识别图片的内容,并“说出”一句文字描述。

这意味着,视障用户也可以阅读图片了。就像这样——


使用安卓系统的小伙伴只要打开手机里的系统设置—辅助功能—开启talkback,随后打开最新版QQ空间APP就能体验图片描述功能。

之前,视障用户碰上图片动态时,只能知道这里有图片,或者需要旁人帮忙讲述图片的内容。这就让他们跟好友的评论互动显得不那么顺畅。

而现在,图片的内容能够被“读”出来,无疑让视障用户获得了更好的社交体验。

我们做了一个小功能,让视障者也能“看见”图片

我们做了一个小功能,让视障者也能“看见”图片

一位参与内测体验的视障小伙伴是这么评价的:
刚听说QQ空间客户端推出可以描述文字配图的功能时我有些错愕,因为自己一直也没想到会有一天能有这种体验。怀着好奇试了一下,正好一个好友在晒她做的美味,虽然空间客户端的图片描述没有告诉我那是什么饭,但却说“图片——一名女士在吃饭。”
可能你不会觉得有什么,甚至认为参考性不是很大,但对我而言却仿佛打开了一扇全新的大门。
之前我对于一般熟的好友动态,只会通过文字揣摩他要表达的意思,关系好的才会评论问图片是什么?而以后这一步基本可以省掉,再也不必让好友描述配图了。
就在刚刚,我给那条分享美食的好友评论:你做的美味,看起来很好吃的样子。看到我的评论她立刻秒回,表示特别惊讶,因为她只发了图片,没有配任何文字。

QQ空间这个看上去简单的功能,其实需要解决这么两个“老大难”:

机器需要能识别图片中的主要物体有哪些——看得懂;

机器需要学习和组织语言,以通顺并符合人类语言习惯描述图片——说人话

解决难题的,是来自腾讯AI Lab的“图像描述生成技术”。

这个自主研发的强化学习算法,在国际顶级大赛MS COCO的该类别挑战赛上取得第一的成绩,甚至超越了微软和谷歌等公司。有了它“撑腰”,用户体验才得到保障。



其实,腾讯从2009年开始就进入到无障碍产品的改造中。我们一直在思考,怎样能用技术帮助更多的用户,也在不断探索新的可能。

比如这次图片无障碍功能的灵感,就是来源于2017年QQ空间团队与深圳信息无障碍研究会的一次交流。

但我们也意识到,除了视障者之外,还有更多有障碍用户需要更方便地获取信息、更自由地交流,这也是我们为之奋斗的目标

我们相信,科技,会是那把打开新大门的钥匙

P.S. 最新版QQ空间APP已于安卓端上线,使用iOS系统的小伙伴过不久也能更新版本,体验图片描述功能。




回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

微信邦网联系QQ|Archiver|手机版|小黑屋|鲁公网安备 37082802000167号|微信邦 ( 鲁ICP备19043418号-5 )

GMT+8, 2024-12-22 22:10 , Processed in 0.091601 second(s), 22 queries .

Powered by Discuz! X3.4

© 2001-2013 Wxuse Inc. | Style by ytl QQ:1400069288

快速回复 返回顶部 返回列表