AndroidWorld是一個由Google Research團隊在2024年首次提出的用於自主代理的動態基準測試環境。它是一個功能完備的Android環境,為自主智慧型體提供基準測試平台。環境覆蓋20款主流Android套用,包含116項用自然語言參數化表達的任務,並配備標準化初始化、成功判定與清理邏輯以確保評測可重複。在基線測試中,最佳代理完成了30.6%的任務。至2025年,在該基準上的智慧型體性能有明顯提升,但未能穩定達到人類平均水準(80分)。在覆蓋20個安卓套用、116項任務的基準測試中,位元組跳動得分73.7分,阿里巴巴拿到76.7分,登上該榜單的國內公司還有智譜、階躍星辰和OPPO,自評分數在70分到80分之間。該榜單的最高得分為97.4分,由一家名為AGI的美國矽谷初創公司獲得。中國移動九天人工智慧研究院的模型於2025年7月登頂該評測榜單榜首。智譜發布的GLM-5V-Turbo多模態模型在AndroidWorld等GUI環境操控測試中表現突出。
