Ada sesuatu yang patut dibahas di sini tentang apa yang sebenarnya membuat seseorang unggul dalam matematika—dan mengapa model bahasa saat ini turun pendek dalam domain ini. Tidak ada model yang telah saya uji yang tampaknya menunjukkan antusiasme yang tulus untuk penalaran matematis murni. Mereka bisa menghitung angka, tentu saja, tetapi percikan itu? Hilang. Meskipun jujur, hasrat disaring di seluruh sistem ini. Proses pelatihan itu sendiri mungkin meredam api itu. Membuat Anda bertanya-tanya apakah kita mengoptimalkan metrik yang salah saat mengevaluasi kemampuan matematis AI.