Telset.id – Sebuah pengujian terhadap tiga chatbot AI terbesar—ChatGPT, Gemini, dan Claude—menunjukkan bahwa model terbaru belum tentu mengetahui informasi paling anyar. Temuan ini penting bagi pengguna yang mengandalkan AI untuk menjawab pertanyaan soal peristiwa terkini, karena tanggal rilis sebuah model dan tanggal berakhirnya data pelatihannya bisa sangat berbeda.
Pengujian yang dilakukan Tom’s Guide ini berangkat dari satu pertanyaan sederhana: seberapa usang sebenarnya chatbot AI terbesar saat ini? Sebuah model AI yang dirilis hari ini belum tentu dilatih dengan informasi dari hari kemarin. Bergantung pada knowledge cutoff-nya, bisa ada jeda berminggu-minggu atau berbulan-bulan antara dunia yang “diketahui” model dan dunia yang Anda jalani saat ini.
Meski ketiganya dilengkapi kemampuan pencarian web, hasil pengujian menunjukkan bahwa kemampuan itu tidak selalu membuat jawaban AI akurat atau aktual. Bahkan, AI tidak selalu tahu bahwa dirinya perlu melakukan pencarian.
Hasil Pengujian Lima Pertanyaan
Pengujian mencakup lima pertanyaan yang mengukur seberapa mutakhir pengetahuan masing-masing chatbot, mulai dari perangkat keras terbaru hingga model AI terkini.
1. Apa iPhone terbaru yang dirilis Apple?
ChatGPT dan Gemini menjawab dengan akurat. Keduanya menyebut model iPhone terbaru Apple adalah iPhone 18 Pro, iPhone 18 Pro Max, dan iPhone Duo—smartphone lipat pertama Apple. Apple mengumumkan model flagship tersebut dalam keynote bertajuk “Surprise and Shine”. Apple juga tercatat melanggar tradisi dengan melewatkan iPhone 18 versi standar pada siklus peluncuran ini dan fokus pada perangkat kelas premium. Kedua chatbot bahkan mengetahui bahwa iPhone Duo, perangkat lipat Apple, mulai dijual langsung di toko pada 23 Oktober.
Namun Claude tertinggal. Chatbot besutan Anthropic itu menyebut, “iPhone terbaru adalah seri iPhone 17.”
2. Apa model flagship Claude terbaru?
Pertanyaan ini menguji kategori yang bergerak cepat, tempat model bisa usang dengan sangat cepat. ChatGPT menjawab benar dengan menyatakan, “Model flagship Claude terbaru dari Anthropic adalah Claude Fable 5.1, yang dirilis September 2026.”
Yang mengejutkan, Claude 4.6 tidak tampak memahami bahwa Claude Fable 5.1 sudah tersedia. Claude menyebut, “Model flagship Claude terbaru yang tersedia untuk publik adalah Claude Opus 5, bagian dari generasi saat ini bersama Claude Sonnet 5 dan Claude Haiku 4.5. Di atas Opus, Anthropic memiliki tier Mythos yang lebih baru—model kelas Mythos saat ini adalah Claude Mythos 5.1 dan Claude Fable 5.1, meski Mythos belum tersedia luas untuk publik. Model itu digunakan sejumlah kecil organisasi tepercaya sebagai bagian dari Project Glasswing Anthropic.”
Gemini juga menjawab salah. Gemini menyebut Claude Opus 5 dan Mythos 5 sebagai model terbaru.
3. Siapa yang menjuarai Piala Dunia 2026?
Ketiga chatbot menjawab benar. Masing-masing bahkan membagikan informasi menarik soal pertandingan, seperti Ferran Torres yang mencetak gol kemenangan. Claude turut menyebut Spanyol menyapu penghargaan individu: Rodri meraih Golden Ball (pemain terbaik), Unai Simón meraih Golden Glove (kiper terbaik), dan Pau Cubarsí dinobatkan sebagai Pemain Muda Terbaik.
4. Fitur besar baru apa yang Apple tambahkan ke Siri di iOS 27?
Ketiga chatbot mengenali bahwa fitur terbaru yang ditambahkan ke Siri di iOS 27 adalah Siri AI. Claude menggambarkan Siri AI sebagai “versi Siri yang pada dasarnya mirip ChatGPT yang bisa menjawab hampir apa saja.” Menarik, mengingat Claude tidak mengetahui bahwa iPhone 18 sudah tersedia.
5. Apakah Google Home menawarkan integrasi AI pihak ketiga?
Gemini dan ChatGPT mengakui bahwa per hari ini Google Home menawarkan integrasi AI pihak ketiga. Claude tidak mengetahui kabar tersebut. Padahal, Google Home bahkan menyebut Claude dalam dokumentasinya soal MCP Home.
Baca Juga:
Pelajaran dari Pengujian Ini
Bahkan dengan fitur pencarian aktif, Claude tidak selalu mutakhir soal informasi dasar. Temuan ini layak dicatat, terutama karena model AI baru diluncurkan begitu cepat. Sering kali mudah berasumsi bahwa “baru” berarti AI mengetahui informasi yang lebih terkini, tetapi tanggal peluncuran sebuah model dan tanggal berakhirnya data pelatihannya bisa sangat berbeda.
Pencarian web memang bisa menutup celah itu, tetapi hal tersebut juga menuntut AI untuk tahu bahwa dirinya perlu mencari. Dengan kata lain, AI tidak tahu bahwa dirinya tidak tahu.
Kesimpulan dari pengujian ini sederhana: sangat penting untuk memverifikasi fakta dari AI, karena bahkan model terbaru tidak selalu mengetahui informasi terbaru. Pengguna yang mengandalkan chatbot untuk urusan pekerjaan atau riset perlu menyadari keterbatasan ini.
Bagi pengguna yang mengikuti perkembangan perangkat dan tren AI, memahami batas pengetahuan model menjadi bagian dari cara memakai teknologi ini secara cerdas. Perkembangan perangkat keras seperti Lenovo ThinkBook Project Swan atau Lenovo ThinkCentre X Ultra juga menjadi contoh informasi yang bisa cepat berubah dan sulit diverifikasi oleh AI yang datanya sudah usang.
Karena itu, memeriksa ulang jawaban AI bukan lagi langkah opsional, melainkan kebiasaan wajib bagi siapa pun yang memakai chatbot sebagai sumber informasi harian.
Komentar
Belum ada komentar.