IklanIklanKecerdasan buatan+ IKUTIMengambil lebih banyak dengan myNEWSUMPAN berita yang dipersonalisasi dari cerita yang penting bagi AndaPelajari lebih lanjutTechTech Trends
- Baidu Ernie Bot 4.0 dan start-up hipu AI GLM-4 adalah model AI berkinerja terbaik di China, sebuah penilaian oleh Universitas Tsinghua menunjukkan
- Sementara masih tertinggal saingan luar negeri di sebagian besar kemampuan, LLM China lebih baik dalam tugas-tugas bahasa teks Cina
Kecerdasan buatan+ FOLLOWKelly Le+ FOLLOWPublished: 21:00, 22 Apr 2024Mengapa Anda dapat mempercayai
Ernie Bot 4.0 SCMP Baidu dan GLM-4 hipu AI start-up menempati peringkat teratas di antara model bahasa besar (LLM) Tiongkok, tetapi saingan asing mereka masih memimpin dalam kemampuan keseluruhan, menurut tes baru oleh Universitas Tsinghua di Beijing.
Laporan penilaian SuperBench memeriksa 14 LLM representatif – teknologi yang mendukung chatbots kecerdasan buatan generatif (AI) – dan menemukan bahwa model luar negeri, seperti GPT-4 OpenAI dan Claude-3 Anthropic, keluar di atas dalam berbagai kemampuan, termasuk pemahaman semantik, kemampuan pengkodean dan keselarasan dengan perintah manusia.
Para peneliti menemukan “kesenjangan yang jelas” dalam penulisan kode dan kemampuan operasi di lingkungan dunia nyata antara model asing domestik dan kelas satu.
Laporan ini bertujuan untuk “memberikan kriteria evaluasi obyektif dan ilmiah” untuk memeriksa semakin banyak LLM yang telah muncul baru-baru ini, menurut sebuah posting WeChat yang diterbitkan oleh Pusat Penelitian Model Dasar Tsinghua, yang melakukan penilaian dengan Laboratorium hongguancun yang didukung negara.
05:03
Bagaimana AI China melawan ChatGPT?
Bagaimana AI China melawan ChatGPT?
Raksasa teknologi dan start-up China telah berlomba untuk meningkatkan LLM mereka sejak OpenAI, sebuah start-up AS yang didukung oleh Microsoft, meluncurkan serangkaian alat inovatif yang didukung oleh AI generatif, termasuk ChatGPT dan layanan text-to-video Sora.
Sekitar 200 LLM telah diperkenalkan di China, di mana layanan OpenAI secara resmi tidak tersedia, menurut angka pemerintah.
Laporan Tsinghua menggemakan komentar baru-baru ini oleh pendiri dan ketua Alibaba Group Holding Joe Tsai, yang mengatakan China sekitar dua tahun di belakang perusahaan-perusahaan AS dalam perlombaan AI global, mengutip bagaimana OpenAI telah melompati industri teknologi lainnya dalam inovasi AI. Revisi terhadap kontrol ekspor AS yang ada, yang mulai berlaku awal bulan ini, telah mempersulit daratan untuk mengakses prosesor AI canggih dan peralatan manufaktur semikonduktor. Terlepas dari tantangan yang dihadapi oleh pengembang LLM China, laporan Tsinghua menunjukkan bahwa Ernie Bot 4.0, versi terbaru dari chatbot AI generatif yang diluncurkan oleh raksasa pencarian web Baidu, dan GLM-4 dari hipu AI, sebuah start-up yang didirikan oleh lulusan Tsinghua, secara bertahap mempersempit kesenjangan masing-masing dengan model terbaik dunia dalam kinerja keseluruhan. Satu area di mana LLM China berkinerja lebih baik adalah tugas-tugas bahasa teks China, tes menemukan. Chatbot Kimi dari Moonshot AI, Tongyi Qianwen 2.1, GLM-4 dan Ernie Bot 4.0 dari Alibaba berada di peringkat empat besar dalam kategori itu, meskipun GPT-4 masih berada di urutan pertama dalam penalaran bahasa teks Cina. Moonshot AI dan hipu AI, bersama dengan Baichuan dan MiniMax, secara lokal dikenal sebagai “empat harimau AI baru” China karena menjadi beberapa start-up AI generatif yang paling menjanjikan di negara itu.
Didirikan pada tahun 2019, hipu AI telah mengumpulkan 2,5 miliar yuan (US $ 347 juta) sejak tahun lalu, menurut pendirinya, dari pendukung yang mencakup investor yang berafiliasi dengan negara, pemodal ventura dan perusahaan Big Tech seperti Alibaba, Tencent Holdings dan Meituan.
Moonshot AI, juga berbasis di Beijing, mengumpulkan US $ 1 miliar dalam putaran pendanaan pada bulan Februari, menurut beberapa laporan media China.
3