全盲用户体验美团AI生活助手,聊聊它的识图和信息追问功能

5 盲人拍生活视频 14小时前 105次点击

失明以后,让人无奈的往往是东西明明就在手里,却总差那一点关键信息。比如摸到一个袋子,我可能知道它是零食,却不知道具体口味;拿到一个盒子,我能猜出是药品,却不知道药名和包装日期。有些识别工具只告诉我这是一个盒子,或者读出许多零散文字,但我可能只需要冗长信息中的其中一小点。所以我希望识图不只给出一次结果,还能围绕同一张图片继续追问。前几天我在论坛看到有人提到美团推出的AI生活助手小美,它能上传图片识别物品、读取文字,并根据图片继续进行相关的提问,也就是问问我是否需要相关的东西。我正好买了一袋零食和几盒常备药,就拿这些东西试了试。最明显的感受就是它不只能替我认出物品是什么,还能继续查包装信息,并根据结果推荐附近的补货渠道或者问我是否需要相关的信息。

打开软件以后,读屏可以正常找到语音输入和上传图片的位置。我先拍下了桌面上的物品上传,想让它帮我看看桌上都有什么。第一次应该是照片没有拍全的缘故,小美只识别出几个袋装和盒装物品,没有讲清具体名称。我重新调整手机位置拍了一张,它识别出面包、牛奶和一包类似饼干的食品。然后我就举着单个包装拍摄图片上传,继续询问具体口味。都算得上识别得比较顺利,并且识别出来之后还给我推荐了就近的小象超市问我需不需要补货。这个过程并不是随手拍一张所有信息马上都能准确说出来的,拍摄角度、距离、光线和包装反光都可能影响结果。不过相比只告诉我这是一袋零食,能够继续追问具体信息并且给我相关的推荐,这对我来说更实用。

我又试着上传药盒照片。平时有些药盒大小和手感接近,只靠触摸不容易分辨,包装上的小字也无法直接通过读屏获取。过去遇到这种情况,我会用其他识别工具拍照,或者请家人提前贴上不同的标签。第一次上传时,可能因为药盒有些倾斜,小美只读出了部分文字。我就又把药盒摆正、靠近一点重新拍摄,它才读出药品名称和包装日期,并且还提醒我去留意药品的有效期。这一步可以帮助我了解药盒上的基本信息,但我肯定不会听完一次识别结果就直接服药。药品名称、有效期、用法用量和禁忌都关系到安全,仍然需要核对包装,并向医生或药师确认。

这次使用让我觉得,盲人需要的识图功能不能只停留在认出是什么。面对包装或读不到的文字,我更希望上传图片后,可以按照自己的需要继续问下去,把真正关心的信息一点点弄清楚。当然,光线太暗、照片没有拍全或者包装反光,仍然会影响识别。重要信息也不能只依赖一次结果。但至少面对日常物品时,我可以先自己尝试确认。大家使用图片识别时,最希望继续追问什么信息呢?也欢迎用过类似功能的朋友分享经验。

共 1 条评论
璀璨的星河 13小时前
0 

豆芽看见和好码注释这两个都比较好。

添加一条新评论

登录后可以发表评论 去登录