Interaksi antara agen dan lingkungan - jalur menuju AGI

gambar



Bisakah jaringan saraf diajarkan untuk berpikir seperti manusia? Atau setidaknya seperti binatang? Apa yang dipikirkan hewan? Bisakah Anda menyebut apa yang terjadi di refleksi kepala kucing? Dan apa sebenarnya rahasia kesadaran? Di bawah ini kami akan mencoba memahami semua masalah ini.



Bukan rahasia lagi bahwa jaringan saraf dapat mendekati fungsi apa pun, bahkan ada teorema yang membuktikannya. Ada lapisan masukan, lapisan tersembunyi, dan lapisan keluaran. Dalam kasus pembelajaran penguatan, lapisan masukan adalah bagaimana lingkungan bertindak pada agen. Dan lapisan keluaran adalah tindakan agen terhadap lingkungan. Untuk mendapatkan agen yang cukup cerdas, kita membutuhkan 3 hal: jumlah neuron yang cukup di lapisan tersembunyi, lingkungan yang cukup rumit yang memungkinkan untuk menerima penguatan, dan kita juga membutuhkan sejumlah besar neuron masukan dan keluaran untuk memaksimalkan interaksi dengan lingkungan.



Pertimbangkan otak manusia - 100 miliar neuron. Secara formal, ini adalah sekitar 10 lapisan dari 10 miliar neuron. Tulis di komentar berapa banyak daya yang dibutuhkan untuk menghitung jumlah ini. Untuk percobaan, Anda dapat menggunakan jumlah neuron yang 10-100 kali lebih rendah.



Lingkungan harus beragam seperti dunia di sekitar kita. Kita dapat mewujudkan agen robotik atau mengajarinya dalam realitas maya dengan meminta penguatan dari fungsi (tindakan agen) yang kita ingin dia lakukan.



Saya ingin membahas neuron input dan output secara terpisah. Tujuan mereka adalah berinteraksi dengan lingkungan. Neuron masukan kucing adalah semua reseptornya di mata, telinga dan kulit, serta banyak lainnya. Output neuron terhubung terutama dengan berbagai otot, yang memberikan makhluk kemampuan untuk berinteraksi dengan lingkungan (umpan balik agen terhadap lingkungan). Semakin banyak neuron input dan output - semakin baik, lebih luas, lebih baik interaksi "lingkungan-agen-lingkungan"



Mari kita lihat beberapa contoh. Reseptor mendeteksi kekurangan udara - otak memaksa paru-paru untuk bernapas. Reseptor perut berbicara tentang rasa lapar - otak mengeluarkan fungsi untuk mendapatkan makanan di lingkungan tertentu. Atau contoh dengan jarum - jika sesuatu menusuk kulit, sinyalnya masuk ke otak, diproses di sana dan otak mengeluarkan perintah ke tangan bagaimana cara menyingkirkan masalah ini. Semuanya bermuara pada hal yang sederhana - ketika reseptor tidak terganggu, tidak ada tindakan. Tetapi jika reseptor bersemangat, maka otak mencari solusi yang akan membantu menghilangkan eksitasi reseptor ini. Segera setelah rantai yang diinginkan ditemukan, dan reseptor telah kehilangan eksitasi, koneksi saraf dari rantai ini diperkuat. Dan kali berikutnya, rangkaian tindakan ini akan menjadi prioritas. Ini terjadi dengan semua tindakan dalam hidup kita. Dengan demikian, Anda dapat membuat agen untuk lingkungan apa pun, dan untuk fungsi apa pun yang kami butuhkan.Pertanyaannya semata-mata terletak pada kapasitas produktif.



All Articles