阿里巴巴與北京交通大學(xué)的聯(lián)合團(tuán)隊(duì)近日在學(xué)術(shù)界引起了廣泛關(guān)注，因?yàn)樗麄児餐瞥隽艘豢钊碌?a target="_blank">手機(jī)操作智能體框架——Mobile-Agent。這款框架旨在為手機(jī)用戶提供更高效、便捷的操作體驗(yàn)，引領(lǐng)手機(jī)操作方式的全新革命。

Mobile-Agent框架的核心優(yōu)勢(shì)在于其純視覺解決方案。傳統(tǒng)的手機(jī)操作方式往往需要依賴XML等標(biāo)記語(yǔ)言以及系統(tǒng)元數(shù)據(jù)，而Mobile-Agent則完全摒棄了這些需求。這意味著用戶無(wú)需進(jìn)行復(fù)雜的設(shè)置或修改，只需通過直觀的視覺指示即可完成操作。

Mobile-Agent的操作范圍不受任何限制，可以在任何應(yīng)用上進(jìn)行操作。這得益于其強(qiáng)大的多應(yīng)用操作能力，使得用戶可以在不同應(yīng)用之間輕松切換，無(wú)需重復(fù)相同的操作步驟。

為了實(shí)現(xiàn)精確的操作定位，Mobile-Agent配備了多種視覺感知工具。這些工具能夠識(shí)別屏幕上的各種元素，如按鈕、圖標(biāo)等，并對(duì)其進(jìn)行精準(zhǔn)的定位和識(shí)別。這一功能為用戶提供了更加個(gè)性化的操作體驗(yàn)，滿足各種不同用戶的需求。

最令人驚喜的是，Mobile-Agent無(wú)需進(jìn)行任何訓(xùn)練即可即插即用。這意味著用戶無(wú)需花費(fèi)大量時(shí)間進(jìn)行學(xué)習(xí)和適應(yīng)，即可輕松上手。這種便捷性使得Mobile-Agent具有廣泛的應(yīng)用前景，為各類用戶提供更加高效、智能的手機(jī)操作體驗(yàn)。

目前，Mobile-Agent已經(jīng)學(xué)會(huì)了如何操作阿里巴巴、谷歌地圖、TikTok等10個(gè)知名應(yīng)用。這意味著用戶可以通過簡(jiǎn)單的視覺指示，在這些應(yīng)用上進(jìn)行各種操作，完成跨應(yīng)用任務(wù)。這一功能為用戶提供了前所未有的便利性，使得手機(jī)操作變得更加輕松愉快。

總體來說，阿里發(fā)布的手機(jī)操作智能體框架Mobile-Agent具有巨大的潛力，有望引領(lǐng)手機(jī)操作方式的全新變革。通過純視覺解決方案、不受限制的操作范圍、精準(zhǔn)的操作定位以及無(wú)需訓(xùn)練的便捷性，Mobile-Agent為用戶提供了更加高效、智能的手機(jī)操作體驗(yàn)。未來，我們期待看到更多關(guān)于Mobile-Agent的研究和應(yīng)用，為手機(jī)操作領(lǐng)域帶來更多的創(chuàng)新和突破。