Bagaimana ChatGPT kalah dari chatbot Baidu?

[iklan_1]

Menurut laporan dari lembaga pengawas misinformasi NewsGuard, ChatGPT lebih mungkin salah mengartikan informasi dalam bahasa Mandarin daripada bahasa Inggris. Meskipun modelnya sendiri multibahasa, bahasa-bahasa tersebut merupakan wilayah terpisah yang tumpang tindih dalam kumpulan data, dan model tersebut tidak memiliki mekanisme untuk membandingkan perbedaan frasa atau prediksi tertentu di antara wilayah-wilayah tersebut.

Menurut TechCrunch , ketika pengguna meminta ChatGPT untuk merespons dalam bahasa Inggris, pada dasarnya ia mengambil semua data bahasa Inggris yang dimilikinya, hal yang sama berlaku untuk bahasa Mandarin.

Pada bulan Maret, Baidu memperkenalkan "Ernie Bot", sebuah chatbot yang berbasis pada model kecerdasan buatan (AI) Ernie, raksasa pencarian Tiongkok tersebut. Seiring dengan terus memanasnya persaingan teknologi antara AS dan Tiongkok, investasi dan pengembangan AI Baidu semakin menarik perhatian.

Menurut Reuters, Baidu mengutip hasil uji yang dilakukan oleh China Science Daily menggunakan kumpulan data AGIEval dan C-Eval, dua tolok ukur yang digunakan untuk mengevaluasi kinerja model AI.

Perlombaan pengembangan AI di Tiongkok kini diikuti oleh tiga "pemain besar": Tencent, Alibaba, dan Baidu.

Ernie 3.5 menunjukkan kemampuan luar biasa dalam tes bahasa Mandarin yang isinya didasarkan pada tes masuk dan kecakapan, seperti tes masuk perguruan tinggi atau ujian pengacara.

Dalam tes bahasa Mandarin lainnya dengan 13.000 pertanyaan pilihan ganda yang mencakup 50 topik berbeda, Ernie 3.5 terus mengungguli kedua pesaing OpenAI tersebut. Namun, ketika mengikuti tes ketiga yang dikembangkan oleh sekelompok universitas di AS, yang mencakup pertanyaan tentang sains dan masyarakat, Ernie 3.5 benar-benar tertinggal oleh ChatGPT dan GPT 4.

CTO Baidu, Haifeng Wang, mengatakan bahwa hanya tiga bulan setelah merilis versi beta Ernie Bot, model bahasa besar (LLM) Baidu yang dibangun di atas Ernie 3.0, Ernie 3.5 telah mencapai peningkatan efisiensi, fungsionalitas, dan kinerja. Peningkatan ini terlihat jelas dalam penulisan, respons kueri, penalaran, dan pembuatan kode, serta kinerja pelatihan dan inferensi, ujar CTO tersebut.

Baidu juga menyatakan bahwa model baru ini akan mendukung plug-in dari Baidu dan pihak ketiga. Perusahaan tersebut menyatakan bahwa plug-in "Baidu Search" telah terintegrasi dan akan membekali Ernie Bot dengan kemampuan untuk menghasilkan informasi yang akurat dan real-time. Plug-in ini merupakan aplikasi tambahan yang memungkinkan AI bekerja dalam situasi tertentu, seperti meringkas teks panjang dan menghasilkan jawaban yang lebih akurat.

Ernie Bot dari Baidu menduduki peringkat pertama di antara "ChatGPT Tiongkok," menurut uji coba yang dilakukan oleh Xinhua pada bulan Juni. Baidu telah mendorong integrasi Ernie Bot ke dalam produk lain, seperti layanan cloud, dan mengumumkan dana modal ventura sebesar $139 juta untuk berinvestasi di perusahaan rintisan AI generatif Tiongkok, menurut SCMP .

Dapat diperkirakan bahwa model bahasa yang besar akan semakin merambah lebih banyak bidang, menjadi faktor utama penggerak ekonomi digital, kata CEO dan salah satu pendiri Baidu, Robin Li.

[iklan_2]
Tautan sumber