鴻蒙原生智能 不讓任何一個(gè)人掉隊(duì)
“黑暗將使他更加珍惜光明;寂靜將使他更加喜愛(ài)聲音?!?/p>
對(duì)于多數(shù)人而言,“看、聽(tīng)、說(shuō)”是再稀松平常不過(guò)的事情。但仍有那么一群人,他們不能像我們一樣,看手機(jī)、刷視頻、打電話、發(fā)語(yǔ)音。
甚至處在高度便利的互聯(lián)時(shí)代,有視聽(tīng)障礙的他們,在日常生活、出行社交中不得不面對(duì)諸多挑戰(zhàn)。光明、聲音對(duì)他們而言或許就是最寶貴的禮物,就像海倫·凱勒的名作,身處黑暗渴望三天光明也只能“假如”。
獲得三天光明需要“假如”,但借助“黑科技”讓視聽(tīng)障礙人群“看見(jiàn)、聽(tīng)見(jiàn)、說(shuō)出”,只需要一部手機(jī)就可以了。
在HDC2024期間,華為發(fā)布基于OpenHarmony打造的全場(chǎng)景智能操作系統(tǒng)HarmonyOS NEXT。作為HarmonyOS誕生以來(lái)最大一次升級(jí)換代,不僅實(shí)現(xiàn)生態(tài)統(tǒng)一、多設(shè)備輕松互聯(lián)、流暢度及能效等體驗(yàn)提升,更首次將AI能力融入系統(tǒng),支持圖像智能、通話智能、文檔智能等能力。
小藝也進(jìn)化為小藝智能體,可執(zhí)行更復(fù)雜的操作,并在端云大模型協(xié)同和意圖框架的加持下獲得更好的場(chǎng)景感知、意圖識(shí)別和用戶理解能力。
升級(jí)的小藝智能體,就是幫助視聽(tīng)障礙人群實(shí)現(xiàn)手機(jī)無(wú)障礙體驗(yàn)的關(guān)鍵“黑科技”之一,也是我在HDC2024現(xiàn)場(chǎng)解鎖的最特別體驗(yàn)。
在“黑超之旅”中,雙眼被遮住陷入完全黑暗后,被工作人員引入模擬的超市購(gòu)物場(chǎng)景,與伙伴協(xié)作在完全看不到的情況下完成指定商品的購(gòu)買。而且,我三人組合中,有一名伙伴扮演了聽(tīng)覺(jué)障礙的用戶,我們之間的溝通交流就是借助小藝智能體,我的“眼睛”也是安裝小藝智能體的手機(jī)。
這里我和朋友扮演了兩名視覺(jué)障礙用戶,重點(diǎn)介紹一下我對(duì)小藝看世界這項(xiàng)“黑科技”的體驗(yàn)感受。
當(dāng)你的視覺(jué)被剝奪后,最先感受到的就是寸步難行——你會(huì)下意識(shí)地放慢、縮小步幅,雙手也無(wú)意識(shí)地摸索前行(即使我確認(rèn)有工作人員保障不會(huì)有任何危險(xiǎn),還是會(huì)如此,以至于工作人員對(duì)我們說(shuō):放心大膽走,沒(méi)問(wèn)題)。
然后來(lái)到一個(gè)完全陌生的空間,你會(huì)腦補(bǔ)周邊環(huán)境,強(qiáng)烈地想要知道自己處在何處,身邊都有什么——但完全看不到,會(huì)有不安感。
當(dāng)工作人員將手機(jī)遞到我手中,告知任務(wù)是打電話給“聽(tīng)覺(jué)障礙”的伙伴時(shí),習(xí)慣性地去解鎖屏幕,才發(fā)現(xiàn)自己什么也看不到。但長(zhǎng)按電源鍵喚醒小藝,說(shuō)出打電話給XX,也就輕松完成了任務(wù)。
由于同伴的角色有聽(tīng)覺(jué)障礙,在這段通話中,小藝會(huì)將我說(shuō)出的內(nèi)容轉(zhuǎn)換為文字呈現(xiàn)在對(duì)方面前,而對(duì)方發(fā)送的文字也會(huì)轉(zhuǎn)變?yōu)檎Z(yǔ)音在我的手機(jī)上播放。這里我知道了自己要購(gòu)買什么東西。
在接下來(lái)我就要通過(guò)自己的“眼睛”找到任務(wù)商品。手持另一部手機(jī)開(kāi)啟小藝看世界后,小藝通過(guò)AI圖像識(shí)別會(huì)持續(xù)播報(bào)手機(jī)拍攝到的內(nèi)容,比如他會(huì)告訴我畫(huà)面中有一個(gè)人(扮演收銀員的工作人員),一雙手在摸著黑色的物體(我的手入鏡了),XX飲料300ml等等。
就這樣,我在貨架上摸索,再加上“聽(tīng)覺(jué)障礙”伙伴的引導(dǎo),終于找到了需要的商品,并在小藝的引導(dǎo)下來(lái)到了收銀臺(tái),完成支付。到這里還沒(méi)有結(jié)束,我們還需要在小藝看世界的幫助下離開(kāi)“超市”。
在出口的門上工作人員設(shè)置了掛牌寫著“此門不通”“門鎖住了”“正確的門”作為提示,小藝播報(bào)到對(duì)應(yīng)的門我們就成功出門結(jié)束了這趟“黑超之旅”。
毋庸置疑,對(duì)于視聽(tīng)障礙用戶,小藝智能體可以提供很多幫助。就我模擬的視覺(jué)障礙用戶而言,小藝可以引導(dǎo)我更準(zhǔn)確地了解周邊情況,特別是一些我們用手去觸摸無(wú)法獲取的信息,畢竟盲文、語(yǔ)音提示等在生活中并不是無(wú)處不在。
同時(shí),在一些特定的場(chǎng)景下讓我能夠在完全看不到的情況下更快地、獨(dú)立地達(dá)到目的,不只是購(gòu)物,還可以是瀏覽逛展、出行社交等等。
當(dāng)然現(xiàn)階段這些功能還有很多提升空間,如用戶手持手機(jī)和識(shí)別主體的距離要適應(yīng)或者嘗試,若配合一些語(yǔ)音提示(“手機(jī)拿遠(yuǎn)一些、手機(jī)拿近一些”)效率會(huì)高一些。
既然是借助手機(jī)攝像頭,對(duì)于環(huán)境光線還是有較高要求,在暗光、弱光環(huán)境下,也就是說(shuō)如果是夜晚可能這項(xiàng)功能的體驗(yàn)就會(huì)差一些。
另外還有一點(diǎn)很關(guān)鍵,盡管在體驗(yàn)過(guò)程中我的視覺(jué)完全被遮罩了,但畢竟腦海中對(duì)于類似的場(chǎng)景畫(huà)面以及手機(jī)的操作模式有豐富經(jīng)驗(yàn),所以在移動(dòng)、尋找物體時(shí)能夠充分借助腦海中的印象,再配合上小藝看世界的引導(dǎo),在完成任務(wù)方面用時(shí)進(jìn)一步縮短。
但是對(duì)于視覺(jué)障礙的真實(shí)用戶而言,他們面臨的挑戰(zhàn)或許要比我們多得多。
值得一提的是,華為在開(kāi)發(fā)這些功能的時(shí)候傾聽(tīng)了很多有此類需求用戶真實(shí)的反饋,在現(xiàn)場(chǎng)我們也見(jiàn)到一些受邀體驗(yàn)這些功能、反饋體驗(yàn)的視聽(tīng)障礙用戶。能夠認(rèn)真接受這些用戶的反饋,對(duì)于這些功能迭代也是十分關(guān)鍵的一環(huán)。
雖然并不完美,但也有很多讓人驚喜以及未來(lái)更值得期待、支持的潛力。
首先,雖然我沒(méi)有詢問(wèn)這項(xiàng)功能是否完全基于本地AI算力,但端側(cè)AI能力的提升,讓圖像識(shí)別可以在本地執(zhí)行將有效降低時(shí)延,并且在無(wú)網(wǎng)環(huán)境下也可以使用,極大程度保證了體驗(yàn)。
從現(xiàn)場(chǎng)的體驗(yàn)來(lái)看,整個(gè)識(shí)別還是很流暢的,基本上我移動(dòng)手機(jī)的同時(shí),小藝就已經(jīng)開(kāi)始播報(bào)畫(huà)面內(nèi)容。
其次,端側(cè)AI在保護(hù)用戶數(shù)據(jù)隱私方面具備先天優(yōu)勢(shì),減少了后顧之憂。同時(shí)若配合“端云融合”方案,如發(fā)揮華為盤古大模型、OpenHarmony等技術(shù)優(yōu)勢(shì),面向消費(fèi)者的鴻蒙原生智能還將有更強(qiáng)大的能力,不僅是自然語(yǔ)言交互,還有更個(gè)性化、準(zhǔn)備的意圖理解,以及統(tǒng)一生態(tài)帶來(lái)的互聯(lián)互通體驗(yàn)
第三,終端軟硬件能力提升,讓畫(huà)面的識(shí)別更準(zhǔn)確也更精細(xì)。比如在體驗(yàn)中,工作人員布置在門上的提示牌上,一些邊緣的小字,甚至標(biāo)點(diǎn)符號(hào),小藝看世界都能夠準(zhǔn)確地播報(bào)提示。
第四,借助手機(jī)這類最普及的終端設(shè)備,如果未來(lái)能力下放到主流機(jī)型甚至走量的入門機(jī)型,那么對(duì)于有特定需求的用戶而言,絕對(duì)是一個(gè)利好消息。畢竟他們“看見(jiàn)、聽(tīng)見(jiàn)、描述”這個(gè)世界需要支付的成本能夠低很多,或者盡可能靠近他們可以承擔(dān)的范圍內(nèi)了。
寫在最后
“黑超之旅”,或者說(shuō)華為的無(wú)障礙溝通展區(qū)只是HDC2024的一小部分,但從這一小部分中我們可以看到科技的力量,或許這并不是多數(shù)用戶需要的、會(huì)使用到的功能,但是對(duì)于同樣身處萬(wàn)物互聯(lián)時(shí)代數(shù)千萬(wàn)的視覺(jué)、聽(tīng)覺(jué)、語(yǔ)言障礙用戶而言,這些功能點(diǎn)則堪稱“必備”。
也有資深業(yè)內(nèi)人士在觀看HDC主題演講時(shí)分享道,這也是AI普惠的重要意義。
正如華為終端BG首席執(zhí)行官何剛提到的:鴻蒙原生智能,不讓任何一個(gè)人掉隊(duì)。
自2019年8月9日正式發(fā)布以來(lái),HarmonyOS操作系統(tǒng)歷時(shí)1778天,歷經(jīng)4代,鴻蒙生態(tài)設(shè)備數(shù)量已超過(guò)9億,已有254萬(wàn)HarmonyOS開(kāi)發(fā)者投入到鴻蒙開(kāi)發(fā),鴻蒙學(xué)堂學(xué)習(xí)人次435萬(wàn),開(kāi)發(fā)者服務(wù)調(diào)用次數(shù)827億次/月。
目前鴻蒙原生應(yīng)用已進(jìn)入全面沖刺階段, 5000多個(gè)常用應(yīng)用已全部啟動(dòng)開(kāi)發(fā),其中超過(guò)1500家已完成上架。
推送更新方面,基于OpenHarmony的HarmonyOS NEXT在6月21日面向開(kāi)發(fā)者和先鋒用戶啟動(dòng)beta升級(jí),預(yù)計(jì)8月份推送Beta版,到了今年第四季度將推送正式版,明年則將支持更多機(jī)型,就讓我們拭目以待吧。
本站所有文章、數(shù)據(jù)、圖片均來(lái)自互聯(lián)網(wǎng),一切版權(quán)均歸源網(wǎng)站或源作者所有。
如果侵犯了你的權(quán)益請(qǐng)來(lái)信告知我們刪除。郵箱:business@qudong.com