拿手機購買東西、支付水費和電費、點外賣......這些普通人似乎很簡單的日常生活。但是，這些對於盲人來說卻是那麼的遙不可及。
近日，阿里聯合清華大學 - 阿里巴巴自然交互體驗聯合實驗室宣佈了人機交互研究的最新成果：一枚AI盲鍵，首次打開了語音和觸摸感官兩個系統，為盲人朋友“玩手機”提供了一種新的可能性。
據阿里巴巴人機交互實驗室研究員趙晨介紹，新的盲觸反饋技術稱為Smart Touch。具體方法是通過支持觸覺交互的“盲鍵”將新的“屏保”連接到手機，通過低成本的屏幕盲鍵提供觸感。更重要的是，根據頁面的動態變化，盲鍵對應的功能也發生變化，提高了交互效率和用戶體驗。
彌補語音交互的不足
目前，視障用戶通常使用讀屏軟件來操作手機，讀屏軟件在用手指觸摸屏幕後提供語音反饋。 “但是這種交互仍然存在很多問題。例如，缺乏觸覺反饋，用戶經常需要訪問大量不需要的元素，並且容錯率很低.、糾錯成本高且頻繁，所以視障用戶的用戶體驗不是很好。”清華大學計算機科學教授喻純表示。因此，他們希望增加聽力、觸摸和其他互動手段，以彌補缺乏簡單的聲音交互，從而增加了視障用戶的人機交互的便利性。
Smart Touch之所以能夠在不同頁面上實現盲鍵功能的功能改變，則與自動理解頁面信息的智能算法密不可分。 “該算法首先提取界面的語義和主要功能，然後以與視障用戶心理模型一致的方式映射到觸覺盲按鈕。因此，與現有技術相比，Smart Touch不僅提供語音交互，但也提供了界面內容的觸覺盲鍵。“喻純說。
對於界面的主要功能按鈕，視障用戶不再需要使用遍歷方法。盲元素可以用於分級地訪問界面元素，這極大地改變了視覺受損用戶現在使用移動電話的方式，來自當前的語音交互。擴展到語音和觸摸交互，為視障用戶提供更高效，更便捷的用戶體驗。
讓聰明的互動向有眼力的人解釋
“我們技術的核心有兩個主要部分：界面理解和界面交互。具體來說，界面理解是指對界面語義的理解。”根據喻純的說法，界面內容包括三層：第一層解決了“無標籤”“控制”。目前手機界面上有很多不同的圖標。大多數圖標都是圖片加文字。讀屏軟件讀出未標記的，Smart Touch自動將圖標與文本相關聯作為圖標。提供標籤。第二層自動識別手機界面的邏輯塊，形成界面元素的層次組織。第三層理解界面的交互語義，並根據視障用戶的心理模型讀取界面。
“我們的研究發現，有視覺障礙的用戶在使用手機時希望在他們旁邊有一個挑剔的人，並解釋他/她手機界面上的內容。 Smart Touch算法的長期目標是實現與用戶旁邊的挑剔人物相同的內容。 “於春說，”當前版本不同接口的盲鍵根據接口規則進行更改。隨著我們的算法不斷改進，將自動生成界面的交互式盲密鑰，以便支持更多的移動電話。應用。”
低成本使弱勢群體受益
“視障用戶去應用商店下載運行Smart Touch APP後，第一次需要先根據提示在手機界面相應位置貼上‘盲鍵’按鈕，然後就可以使用Smart Touch 提供的功能了。”
說道實用性，趙晨說盲鍵的成本非常低。 “我們目前使用的是普通的硅膠膜，很便宜成本很低，這樣才可以使大多數視障用戶可以用得上用得起，更重要的創新是背後的AI算法。以後我們會對這個盲鍵進行更多的觸感設計，讓它有更清晰的觸覺反饋，滿足更多的應用程序的需要。未來可以免費發放給視障用戶使用”。
觸覺是人與環境、與人交往的重要渠道。它也是視障用戶的主要信息渠道。趙晨說：“我希望我們的技術創新不僅能為大眾用戶服務，還能幫助視障用戶的劣勢。或者少數群體讓他們的生活更加愉快。從另一個角度看，電話發明的初衷是為了幫助聾人，今天它是每個人不可或缺的設備。從長遠來看，我們希望成為視障用戶。所提供的技術將在未來逐漸受益於公眾。
閱讀更多 科技New時代 的文章
