Motif dan ExaOne membuka obrolan hingga 14 hari, jadi saya baru saja mencobanya. Keduanya sangat mengecewakan. Pajak saya ㅜ.ㅜ
Misalnya, jika saya harus tiba di Stasiun A pada pukul 9 pagi Sabtu ini. Jam berapa kereta yang harus saya naik dari Stasiun B? Jika saya mengajukan pertanyaan seperti itu,
ExaOne sangat hati-hati atau membutuhkan waktu lama untuk menjawab. Apakah karena servernya lambat atau karena proses berpikirnya yang dalam, tetapi proses pemikirannya sendiri terasa kosong.
Motif cepat. Dari A ke B memakan waktu 51 menit, jadi dia menjawab bahwa saya harus naik kereta pukul 8:09. Tentu saja, itu bukan jawaban yang saya harapkan.
Jika saya mengajukan pertanyaan yang sama kepada ChatGPT, ia akan mencari jadwal kereta bawah tanah akhir pekan di arah tersebut dan memberi tahu saya dengan tepat.
Selain itu, saya juga bertanya tentang makalah yang lebih teknis, keduanya menjawab dengan cukup baik. Namun, jika jawaban ChatGPT terasa seperti dari mahasiswa doktor atau profesor, maka jawaban Motif terasa seperti dari mahasiswa baru S2. Apakah mereka benar-benar mengerti? ExaOne sangat lambat (mungkin karena servernya lambat?). Dan isinya...
Motif bahkan menafsirkan singkatan dengan salah. Bahkan ketika saya bertanya lagi, dia tidak menyadari kesalahannya. Ketika saya memberikan penjelasan yang tepat tentang singkatan tersebut, barulah dia mengakui kebenarannya.
Mungkin model asing ini dapat digunakan di lembaga pemerintah atau badan publik yang tidak mengizinkan penggunaan model asing, tetapi masih banyak yang harus diperbaiki. Saya belum mencoba model lain, jadi saya tidak tahu. Secara subjektif, tampaknya tertinggal sekitar 1-2 tahun (tentunya, skor benchmark menunjukkan hasil yang baik).
▶ Sumber asli: https://chat.motiftech.io/chat
▶ Sumber asli: https://k.exaone.ai/
