Google resmi meluncurkan Gemini Ultra, model kecerdasan buatan (AI) terbaru yang diklaim sebagai yang paling canggih di dunia.
Gemini Ultra, bagian dari seri Gemini AI, dipromosikan sebagai model multimodal pertama yang dirancang sejak awal untuk memahami teks, gambar, audio, video, dan kode secara simultan, mengungguli kemampuan GPT-4 OpenAI dalam 30 dari 32 benchmark akademis.
Gemini Ultra mencapai skor 90,04% dalam tes Massively Multitask Language Understanding (MMLU) yang mencakup 57 subjek, termasuk STEM, humaniora, dan pemrograman.
Skor tersebut melampaui GPT-4 (86,4%) dan bahkan mengalahkan performa ahli manusia dalam bidang serupa.
Dalam tes penalaran kompleks seperti Big-Bench Hard, Gemini Ultra meraih 83,6%, lebih tinggi 0,5% dibandingkan GPT-4.
Kemampuan coding-nya juga unggul, dengan skor 90,0% pada HumanEval untuk menghasilkan kode Python, dibandingkan GPT-4 yang mencapai 87,3%.