Banyak yang mengandalkan LLM juga untuk melakukan operasi matematika. Pendekatan ini tidak berhasil.

Masalahnya sebenarnya sederhana: model bahasa besar (LLM) tidak benar-benar tahu cara mengalikan. Terkadang mereka bisa mendapatkan hasil yang benar, sama seperti saya yang mungkin hafal nilai pi. Tapi ini tidak berarti bahwa saya adalah seorang ahli matematika, dan juga tidak berarti bahwa LLM benar-benar tahu bagaimana melakukan matematika.

Contoh praktis

Contoh: 49858 *59949 = 298896167242 Hasil ini selalu sama, tidak ada jalan tengah. Bisa jadi benar atau salah.

Bahkan dengan pelatihan matematika yang masif, model terbaik hanya mampu menyelesaikan sebagian operasi dengan benar. Sebaliknya, kalkulator saku sederhana, selalu mendapatkan 100% hasil yang benar. Dan semakin besar angkanya, semakin buruk kinerja LLM.

Mungkinkah mengatasi masalah ini?

Masalah dasarnya adalah bahwa model-model ini belajar berdasarkan kemiripan, bukan berdasarkan pemahaman. Mereka bekerja paling baik dengan masalah yang mirip dengan yang telah mereka latih, tetapi tidak pernah mengembangkan pemahaman yang benar tentang apa yang mereka katakan.

Bagi mereka yang ingin mempelajari lebih lanjut, saya sarankan artikel ini tentang "bagaimana LLM bekerja".

Kalkulator, di sisi lain, menggunakan algoritme yang tepat yang diprogram untuk melakukan operasi matematika.

Inilah sebabnya mengapa kita tidak boleh sepenuhnya bergantung pada LLM untuk perhitungan matematis: bahkan dalam kondisi terbaik, dengan sejumlah besar data pelatihan khusus, mereka tidak dapat menjamin keandalan bahkan dalam operasi yang paling dasar. Pendekatan hibrida mungkin dapat digunakan, tetapi LLM saja tidak cukup. Mungkin pendekatan ini akan diikuti untuk memecahkan apa yang disebut 'masalah stroberi'.

Aplikasi LLM dalam studi matematika

Dalam konteks pendidikan, LLM dapat bertindak sebagai tutor yang dipersonalisasi, yang mampu menyesuaikan penjelasan dengan tingkat pemahaman siswa. Misalnya, ketika seorang siswa menghadapi masalah kalkulus diferensial, LLM dapat memecah penalaran menjadi langkah-langkah yang lebih sederhana, memberikan penjelasan terperinci untuk setiap langkah proses solusi. Pendekatan ini membantu membangun pemahaman yang kuat tentang konsep-konsep dasar.

Aspek yang sangat menarik adalah kemampuan LLM untuk menghasilkan contoh-contoh yang relevan dan bervariasi. Jika seorang siswa mencoba memahami konsep limit, LLM dapat menyajikan skenario matematika yang berbeda, dimulai dengan kasus-kasus sederhana dan berlanjut ke situasi yang lebih kompleks, sehingga memungkinkan pemahaman yang lebih baik tentang konsep tersebut.

Salah satu aplikasi yang menjanjikan adalah penggunaan LLM untuk menerjemahkan konsep matematika yang kompleks ke dalam bahasa alami yang lebih mudah diakses. Hal ini memfasilitasi komunikasi matematika kepada khalayak yang lebih luas dan dapat membantu mengatasi hambatan tradisional dalam mengakses disiplin ilmu ini.

LLM juga dapat membantu dalam persiapan materi pengajaran, membuat latihan dengan tingkat kesulitan yang berbeda-beda dan memberikan umpan balik yang terperinci mengenai solusi yang diusulkan siswa. Hal ini memungkinkan para guru untuk menyesuaikan jalur pembelajaran siswa mereka dengan lebih baik.

Keuntungan nyata

Yang juga perlu dipertimbangkan, secara umum, adalah 'kesabaran' yang ekstrem dalam membantu siswa yang paling tidak 'mampu' untuk belajar: dalam hal ini, ketiadaan emosi akan membantu. Meskipun demikian, bahkan guru pun terkadang 'kehilangan kesabaran'. Lihatlah contoh yang 'lucu' ini contoh.

‍