龙虾来势汹汹,读屏软件还有未来吗

5 青青子衿 3周前 693次点击

龙虾类智能体已经开始在有些手机厂商里面开始布局了。3月6号小米龙虾已经开放了小范围的邀请测试,那么这距离正式发布,看来也是有期待的那一天了,我通过一些渠道了解到龙虾类智能体有超越读屏软件的功能,那么读屏软件还有未来吗,读屏软件有的功能,龙虾类智能体全的全都有,但是龙虾智能体能做的事情,读屏软件却做不了。那么读屏软件是否会被将来会被淘汰呢,大家一起来讨论讨论看看呢,下面我贴上关于龙虾的介绍视障朋友解放双手神器!龙虾AI智能体超简科普

视障朋友用手机,是不是总遇这些麻烦?起点小说这类APP常规读屏划不动、找书筛选要反复点、刷内容要不停手动划、重复操作费手又费神?今天给大家科普一个能彻底解放双手的神器——龙虾类AI智能体。

它和小爱、Siri这类传统语音助手完全不一样:你不用分步下指令,只要说清最终目标,它就能自主拆解步骤,跨APP自动完成全流程操作。比如一句话就能搞定“找喜马拉雅里我没听过的2024年后完结悬疑小说,只订阅专辑不关注主播,加入待听听单”。

最核心的优势,全是为我们视障用户量身适配的:

1. 和读屏软件同源,用安卓原生无障碍权限,受法律保护,APP根本封不了;

2. 自带屏幕探测,能搞定起点这类常规读屏识别不了的自绘界面;

3. 有本地端侧版本,核心功能断网也能用,不会像之前的工具说废就废;

4. 安全可控,拿不准的操作会先确认,敏感操作必须你授权才执行,控制权全在你手里。

共 74 条评论
江笑 3周前
0 
请问这是个啥?
青青子衿 [楼主] 3周前
0 
一两句话很难说得清楚,你可以在豆包里开深度思考模式,深度思考的专家模式,问豆包关于龙虾的问题
小星星 3周前
0 
这么直白的跟你解释吧,你不记得去年的那个豆包首次内置到那个卢比亚手机里面变成了豆包助手吗?后来不是给几大厂商给封禁了吗?虽然给其他厂商封禁了。但是后面既然豆包开头了,那后面的什么千问呐?也开启了什么自动运行代码的那个功能,这不这一年小米手机首次推出了这个什么所谓的龙虾智能体啊,这个龙虾智能体。即将要跟着那个豆包助手的路途去走,现在小米都这么干了,那未来不可能你腾讯都把小米登录的微信也给封了吧。
青青子衿 [楼主] 3周前
0 
不一样的,龙虾类的智能体和豆包啊,小爱啊等等的这一类语音助手是不一样的,他们底层逻辑就不一样。一个是国家有保障的有持证上岗,一个是走后门走关系的,不一样的,只要读屏软件能用的,龙虾智能体就都能用,这是相关法律法规保障
云亭 3周前
0 
隔壁论坛这个挺火的。都在往电脑上搞。电脑想要安装这个,好像需要用 Windows PowerShell。
云亭 3周前
0 
隔壁有人吐槽这东西,大用没有,小用用不着。大用你说让他去帮我卸载一个360他做不到。他能做的事情其实咱动手也能解决。
青青子衿 [楼主] 3周前
0 
哦,你说的那个啊,好像那个是奥地利的私人一个代码转代码程序员花了一个小时开发出来的简缩略版本,而且不是一装上去就马上能用的,需要你养的,就像训练AI那样,你慢慢的训练它才能越来越好用,等等等,这些这些信息我都是听来的啊,不保真
青青子衿 [楼主] 3周前
0 
小米已经开发出了测试版本的龙虾了,在如果你有小米17的话,可以去尝试搞一个邀请码
0 
应该不会,因为我们毕竟还需要一些对手机的基本操作。等这些智能体开放之后。对于手机的复杂操作,比如说点外卖,订火车飞机票,在网上购物这些应该都能教给他们。但像对手机的基本操作,滑动、点击刷视频这一类的。,还是我们所需要用到读屏软件的地方的。这些东西就算再简单,你还是需要动动手指的。只要你还需要亲手操作手机,那你就还能用得到读屏软件
云亭 3周前
0 
永远记住,它是AI,你不能完成100%操作,不然那要屏幕干啥?直接给个小音箱,你直接控制不就完了。搞得好像你现在有AI语音助手,你就放弃了读屏一样。那玩意不是一个概念。
青青子衿 [楼主] 3周前
0 
但是将它的数据库,如果和类似和Gemini啊等等国外的那些那些大大模型相联合起来的话,那能实现的功能就很多了,具有读屏软件的那样OCR功能,再再再加上大模型数据库的那种识识别,在,然后它本身龙虾智能体又能实现。嗯,系统层系统级的底层操作逻辑,第三方App都封不了接口,这不就是可以解放双手吗?做到100%不可能。90%以上,我相信应该可能的吧
Sleep 2周前
0 
异想天开。
青青子衿 [楼主] 2周前
0 
这倒是真的,我只是随便想想,手机厂商都有自己的大模型,肯定不会让其他公司的大模型接入的,只会接入自家的高大模型
彼岸 3周前
0 
赞同
0 
现在是做不到,但以后,结果几乎是必然的,趋势已经不可挡了。它不是要解放我们读屏用户那么简单,是要重塑所有人的操作逻辑。
0 
有没有这种可能,未来屏幕阅读器可能会内置一个这个或者是谷歌的talkback,或者是华为的屏幕朗读,也内置一个这个
0 
这种东西成熟以后的操作逻辑是,你只需要使用这个AI就可以了,读屏只需要优化AI界面就可以了。
0 
确实,比如打开一个页面,无障碍、极差,而且文字识别也废了,就可以靠这玩意儿不过,这东西还是不能解决银行密码的那种问题
青青子衿 [楼主] 2周前
0 
银行就不用想了,他一句为了顾客的资金安全,什么理由都说不通
0 
可以解决,这种东西必然会集成为系统级。可以有更高的权限,和简单的Agent是不同的。豆包手机就有一个权限,可以向用户展示受保护的内容和进行非信任操作。
0 
所以未来说不定可以靠这个去干正常人的游戏
0 
其实现在的水平就已经能够搞一些类似于文字选择类的游戏,比如说《隐形的守护者》《中国式家长》之类的。只要能做一个专业的辅助模型,就可以通用大部分这类游戏了。
加贺 3周前
0 

4. 安全可控,拿不准的操作会先确认,敏感操作必须你授权才执行,控制权全在你手里。

没读屏怎么确认,没读屏密码都输入不了

青青子衿 [楼主] 3周前
0 
嗯对哦,你说的也对
0 
我觉得读屏软件以后其实可以朝这个方向发展的。如果能做得到的话。复杂的操作,我们发一个指令就能完成。简单的操作,则我们自己动动手指就可以。如果能做到的话,这应该就是我们用手机的更好的无障碍。现在其实还是有一些场景是我们用读屏软件不太好搞得定的。比如说过一些验证码啊银行登录啊这一类,要涉及到隐私的。我们用文字识别这一类的功能,完全不管用的,他们都会有隐私设置。当然现在的豆包手机助手也做不到。只能期望未来了。还有就是个人对手机的操作能力不一样。比如说在网上订酒店,查看飞机票。或者是点个外卖。身边其实还是有那么一些少数,因为各种原因而不会这些操作的人的。如果*软件在未来能和这些发展起来的手机助手结合起来的话。那像这一类的操作,无论再复杂,也不会再成为我们操作手机的障碍。如果以后的技术能办到的话。那就再好不过了
0 
豆包手机是可以做到的,有个权限可以向用户展示受保护的内容和进行非信任操作,豆包手机就有那个权限,和简单的Agent是不同的。
加贺 3周前
0 

就像上面朋友说的,除非没有屏幕,就一个音箱可以不要读屏

青青子衿 [楼主] 3周前
0 
这个我不是很明白的,但是我觉得智能手机的系统和音箱的系统还是不一样的吧。不管不管怎么样,你安卓系统哪怕你看不到屏幕了,的屏幕其实还是在数据层面存在的
云亭 3周前
0 
问你一个问题啊。你说现在网络这么发达,大家都能在网上看世界了,你为什么还要出去旅游?更好的形容我不好说,但是呢,你这样你可以想想。你说的AI可以代替很多东西,那网络也一样。网络可以代替你的出行,可以代替你的各种社交。那既然有了网络,你可以到网上看世界,你可以到网上做你想做的事情。那你为什么要旅游?
每一步 2周前
0 
你说的这个跟豆包手机是一样的啊有一个专门的AI语音键,按一下就可以发指令让他操控手机
青青子衿 [楼主] 2周前
0 
不一样的,他们底层逻辑是不一样的,豆包手机的那种语音管家,能够被第三方App封禁,但是龙虾这种的第三方不能封禁
每一步 2周前
0 
这个只是暂时的时代的进步绝对不会因为少部分人的利益受损而停止前进所以希望AI手机的发展快一点到时候大势所趋那些软件巨头也得低头
青青子衿 [楼主] 2周前
0 
这个龙虾它的智能体的逻辑是这样的,它是从系统安卓系统级的嗯数据库调用资源,那个第三方app不能封禁他们,因为这是国家规定的,它是从无障碍权限通道走的。国家规定是不能是封禁无障碍功能权限,所以第三方app封不了r,不然的话大家那么追求干什么?甚至到了3月6号的时候把,腾讯楼前几千人排队,男女老少各各个阶层的人都有,就去安装这个东西啊,这其实就是一张窗户纸,各大手机厂商其实都会做,只是为了各自的生态和生态护城河,而不刻意避免开发这个这种类型的软件,但是那个奥地利的私人程序员,他开发出来了,并且开源了。导致这个信息被统名了,所以各大厂商开始不得不开发类似于龙虾的这种智能体软件了,你要是有小米17的手机,可以尝试去申请小米龙虾的邀请码,参与测试小米龙虾
0 
真六了,这啥时候又成国家规定的了不要把我们的辅助功能权限看得太高,有的软件还真能封禁你的辅助功能权限只是你没遇到罢了
青青子衿 [楼主] 2周前
0 
哦,豆包说的,我只是个无情的转述机器
0 
好豆包说的你也敢信?大神真的是666
0 
别搞笑了,不可能不能封禁,屏幕阅读器都能封禁,那东西如果是和屏幕阅读器一样使用无障碍权限都能封禁,,另外,这种东西只能做个辅助,不能完全依靠,参考那个倒霉的老外的电子邮件收件箱
每一步 2周前
0 
之前看豆包手机测评的时候发现豆包手机的权限比现在普通手机的权限要高得多,因为他们不需要看屏幕,而是直接获得数据,以数据的形式来操作手机。
每一步 2周前
0 
希望AI手机发展的更快一点这样我们操作手机就更简单了
0 
不过都是辅助功能权限,那东西开了会不会和屏幕阅读器的辅助功能全线打架另外,未来如果这东西比较不错,那么可以内置到屏幕阅读器里面而且感觉这东西好像是个离线运行的

几年前就有人信誓旦旦的跟我说:

ai来了,盲人玩游戏不用做无障碍了,一个ai搞定。

几年过去了,

实测一些团队开发的ai系统,帮人玩游戏也好,

号称大模型识别很厉害的一些软件也好,

都没能和那位说的一样,

代替无障碍可访问性,让盲人玩上游戏,

反而是ai写代码,帮助了不少人,实现了一些工作量的减少,从而更多游戏的无障碍插件纷纷涌现而出,使用了读屏,合并起来,成功达成了帮助盲人玩更多游戏的目的。

几年后的现在,所谓的龙虾又来了,

又有人跑出来说了,读屏可能被淘汰,

和几年前何其的相似,

什么时候总有这一批人存在,


读屏存在了这么多年,承担的已经不只是朗读的作用,还有统一无障碍操作,触摸浏览,

以及带动一些能力更好的和盲人交互的这么一种作用,

哪有那么容易被取代。

未来更好的方式应该是这种龙虾成为读屏的另一双手,

给读屏赋能,扩展屏幕阅读器这个工具在无障碍上的中枢作用,给无障碍更好的添砖加瓦,

而不是一上来就取缔读屏,

这会有很不好的负面作用。


本楼来自:论坛助手
0 
来个更古老的,几年前微信小程序上线,有人说软件要消失,几年后我这手机上的软件还是这么多呀,几年前快应用服务出现。又有人说手机上的软件会越来越少。几年后大神,求求你了,帮我把这个快应用服务给卸载掉吧只能说,这玩意儿只能是个辅助不过理论上来说,如果他比较那啥的话,还真能帮你跑跑游戏
0 
读平是读平,助手是助手,两者用途不是一个层面。不过不管怎么说国内读平比不上苹果的行白流畅而稳定,只不过国内读平功能方面好些。
哪里不稳定了
0 
不过,为什么让我想到一个很搞笑的东西,某个答辩互动的无障碍助手,他竟然用了助手两个字,真的是好玩
0 
稳定,你用根权限把这些第三方的写成系统的,看看稳不稳定一切配置都按Talk back那样的配置
0 
不要把苹果看得太强,也不要把安卓看得太弱,不可能有十全十美的操作系统
0 
就现在这个阶段,建议楼主还是别抱太高期望。AI梦可以有,但现在连黎明前的那一丝曙光都为能看见。就像之前一个段子里那个地主喊那个叫发财的仆人,那仆人回应的那样:“还早!还早!” 本楼来自:智慧人生

开发板

0 
但是这种工具应该以后会成为一个系统插件那样的另外,这个东西的实现成本要比所谓的人形机器人的实现成本低很多倍不矛盾的说,只要你有一个能联网的计算机,包括智能手机,它都是可以部署这玩意儿的
青青子衿 [楼主] 2周前
0 
你可以去关注一下3月6号的关于雷军雷军的新闻,他发布了小米龙虾,在小米17全系列上面邀请制测测试,龙虾类智能体会成为系统的一部分
0 
那不就成了一个系统插件吗而且这东西是开源的屏幕阅读器或者是一些别的什么软件都可以接入,不对,什么鬼接入都可以写进去,写成屏幕阅读器里面的一个功能
0 
不过相信我,这个东西对我最大的好处并不是能让我的计算机的操作有多好,它会让我看到更多的小粉红和更多的红色战士在那疯狂喷
每一步 2周前
0 
有一款APP叫自动精灵,就是用无障碍的权限来操控手机,我用了几个月,确实不会被各大软件封禁,这个APP调用的也是豆包大模型的接口。只不过他们的操作逻辑不一样:自动精灵是必须前台以无障碍的形式操控手机;豆包手机则是直接在后台操作,甚至连APP都不打开,直接发送数据完成操作。
青青子衿 [楼主] 2周前
0 
龙虾和豆包之类的不一样,龙虾他要打开App才能操作,不能不打开操作,感觉龙虾有点像那个读屏软件加操作精灵这种结合体,哦,对了,后面有大模型支持
每一步 2周前
0 
你应该没有用过自动精灵这个APP,我举个例子,让他给微信好友发条信息,他首先打开微信,然后查找好友,然后再给好友发信息,整个操作过程和真人操作是一样的,读屏甚至可以听到他的整个操作过程,这个软件用的就是豆包AI大模型。
0 
我手机自带的语音助手就可以做到这个功能
每一步 2周前
0 
那不一样自动精灵,那个APP还能点外卖、叫滴滴,甚至能自动帮我在天坛社区里面发帖子、回帖子。上次我甚至让他帮我把照片里面的水印给去掉他都完成了
青青子衿 [楼主] 2周前
0 
大家讨论不要停啊,我就赚点积分,我容易吗
0 

它出来的效果和豆包手机差不多。但是他只做本地化操作。不去触碰软件的危险封控。要阵地目前还是在电脑上。出来的效果和前一段豆包手机的效果差不多。

0 
不过你觉得未来国内这4家屏幕阅读器厂商,哪一家会先把这个写进屏幕阅读器里面呢
青青子衿 [楼主] 2周前
0 
嗯,这我猜不出来,不过我是比较期待小米的那个小米龙虾的,如果小米龙虾准备全面推广,我就不用换手机了
0 

不知道你们还记不记得当年小爱同学刚出来的时候,他是可以语音发微信消息,语音控制发红包,语音,控制打微信电话,微信视频,语音控制发消息。为什么呢?后来没了呢?是因为刚开始的时候,像微信之类的软件,他默认允许这些操作,他觉得这些操作可能就是本地化的,没有风险,但是后来他发觉这些好像风险挺大的,就把这些权限收回了,如果再这样操作的话,就会触发封号。所以小米手机也相应地收回了这些使用权限。但是现在这些什么豆瓣手机啦,什么龙虾ai啦,他们做的不都是以前人家已经做过的啊,但是后来发觉不对劲儿以后就不做的东西吗?让不让你干,完全取决于各大软件允不允许你这样操作。

0 

简单一句话,这些东西都是七八年前雷军玩剩下的。雷军走了一趟没走通,又返回的东西。

青青子衿 [楼主] 2周前
0 
但是好像新闻上说,雷军在发布那个小米龙虾的时候说他和小爱同学不一样
每一步 2周前
0 
有些无障碍不好的App完全无法用读屏来操作,这个时候用AI助手帮我们完成操作,还挺不错的。
每一步 2周前
0 
楼层盖得高就有积分吗?这个积分有什么用
青青子衿 [楼主] 2周前
0 
没什么实际作用,就是用来显示一下,炫耀炫耀呗,嗯,不然一天在一天到晚在家没事做,实在太无聊了
每一步 2周前
0 
本来我也想买个小米手机的,但是我以前用过两款小米手机都有手机发烫的问题,然后我就再也没有用过小米手机了,也不知道这个问题有没有解决,还有无障碍支持怎么样?我在社区里面老是看到小米手机有无障碍问题,想买又不敢买。
青青子衿 [楼主] 2周前
0 
不要用老眼光去看待以前的,然后还有谁说小米手机无障碍化不好了,小米手机无障碍化很好啊,我从小米用到红米都用了十几年了,现在用的红米K70安装了天坛和点点名都运行的很好啊
0 
那个啥,小米每次系统更新都会出点无障碍问题,很多厂商都这样,只要不抽风去更新最早的那几个版本就行了
我算是懂养龙虾养的啥了,养这玩意啊
0 
如果你要养一只龙虾,你一个多月要花在他身上的伙食费几百到几千不等
话唠 2周前
0 
如果他能优化把未加标签的地方给加上标签那就好了。
0 

那我就想问一下,龙虾再厉害,以后你拿个手机,你一句话给个指令,他都帮你操作所有的,你心里踏实吗?比如说你闭着眼睛,你看不到屏幕,你说在网上帮你买一台什么什么手机,他直接帮你付款,你敢吗?那如果说付款最后一步还是要你自己执行的话,你没有读取软件你怎么执行

添加一条新评论

登录后可以发表评论 去登录