Pernahkah Anda merasa kebingungan dalam memilih model AI terbaik untuk membangun aplikasi Android Anda? Google memberi jawaban atas pertanyaan tersebut dengan meluncurkan ‘Android Bench’, sebuah inovasi baru yang mengevaluasi dan merangking AI Models for Android Apps berdasarkan kecakapan mereka. Melalui platform ini, komunitas developer dapat dengan mudah memilih alat AI yang tepat untuk menciptakan aplikasi dan pengalaman baru di Android.
Peluncuran Android Bench oleh Google
Google baru-baru ini mengumumkan peluncuran Android Bench pada suatu postingan di Blog Pengembang Android. Ini digambarkan sebagai papan peringkat resmi sistem operasi untuk model bahasa besar (LLMs) untuk pengembangan Android. Google menyatakan bahwa benchmark ini dikembangkan untuk memberikan pengembang model AI “panduan yang jelas dan dapat diandalkan mengenai apa itu pengembangan Android berkualitas tinggi”.
Selanjutnya, benchmark ini dibuat dengan menggunakan serangkaian tugas di sekitar berbagai area pengembangan Android yang umum, seperti jaringan pada wearable dan migrasi ke versi terbaru dari Jetpack Compose. Tugas-tugas ini diperoleh dari repositori GitHub Android publik, menurut postingan tersebut. Perusahaan mengatakan bahwa tugas-tugas ini telah divalidasi melalui beberapa pembuat LLM.
Namun demikian, versi awal dari Android Bench hanya berfokus pada kinerja model dan tidak mencakup kemampuan agenik atau penggunaan alat. Selain itu, metodologi, dataset, dan perangkat uji tersedia secara publik di GitHub. Untuk menghindari kontaminasi data (di mana jawaban atas pertanyaan ditambahkan ke proses pelatihan model AI), tugas-tugas tersebut dikatakan berfokus pada penalaran daripada menghafal atau menebak.
Saat ini, Gemini 3.1 Pro berada di puncak papan peringkat Android Bench, diikuti oleh Claude Opus 4.6, GPT-5.2-Codex, Opus 4.5, dan Gemini 3 Pro, masing-masing. Raksasa teknologi tersebut mengatakan bahwa semua model AI yang terdaftar dapat dicoba oleh pengembang dengan menggunakan kunci API di versi stabil terbaru dari Android Studio.
Bagian berikutnya, Google mengatakan akan terus meningkatkan metodologi untuk menjaga integritas dataset dan juga berencana membuat peningkatan untuk rilis benchmark di masa depan. Iterasi selanjutnya dari Android Bench akan melihat peningkatan jumlah dan kompleksitas tugas.