Yaşam bilimleriÖn baskıSimülasyon3 dk okuma

BİR YAY AĞININ NEDEN UYKUYA İHTİYACI OLSUN?

Uyku nedir? Bir hayvanın çevresine daha az tepki verdiği, geri döndürülebilir bir dinlenme hali olarak tanımlanır; hayvan uykudan yoksun bırakıldıktan sonra da ona daha çok ihtiyaç duyar. Bu biçimde tanımlandığında uyku, hayvanlar âleminin her yerinde karşımıza çıkar: memelilerde ve kuşlarda, balıklarda ve solucanlarda, hatta denizanaları ve hidralar gibi merkezî sinir sistemi olmayan hayvanlarda bile. Bu yaygınlık, Syracuse Üniversitesi’nden Nada Elmeligy, Nidhi Pashine ve J. M. Schwarz’ın sorduğu bir soruyu doğuruyor: uyku ihtiyacı, öğrenen sistem ne olursa olsun, öğrenmenin kendisinden kaynaklanıyor olabilir mi?

Yapay zekânın kısmi bir yanıtı var: “uyanıklık–uyku” (wake–sleep) algoritmasından bu yana, uykuya benzer evreler sinir ağlarının eski şeyleri unutmadan yeni şeyler öğrenmesine yardım ediyor. Ama bu ağlar matematiksel olarak önceden belirlenmiş öğrenme kurallarını izliyor. Ekip daha basit ve tamamen fiziksel bir şey istedi: kendi mekaniğiyle öğrenen bir malzeme.

Öğrenen yaylar

Ekibin öğrenen sistemi düzensiz bir yay ağı: 354 ila 366 yayla birbirine bağlanmış 128 düğüm. Öğrenmesi gereken görev mekanik bir görev. Bir çift kuvvet bir yayı çektiğinde (girdi), daha uzaktaki başka bir yay (çıktı) kesin bir gerilimle yanıt vermeli. Öğrenme yerel olarak gerçekleşiyor: her yay, hissettiği gerilimlerden yola çıkarak kendi sertliğini ayarlıyor; merkezî bir işlemci yok.

Ekip bu tür 50 ağı 23 ziyaretlik bir akış üzerinde eğitti: daha önceki görevlerin 14 tekrarıyla karıştırılmış dokuz yeni görev. Akış ilerledikçe yeni görevleri öğrenmeyi başaran ağların oranı giderek küçüldü. Suç görevlerin kendisinde değildi: başlangıç durumundan ilk sırada eğitildiklerinde aynı görevler daha sık öğrenildi.

Öğrenmek, öğrenme kapasitesini tüketiyor

Açıklama, yazarların baskınlık (dominance) adını verdiği bir nicelikte yatıyor. Bir yayı iki ucundan çekin, yük dağılır: bir kısmı o yayda kalır, geri kalanı çevresindeki ağdan geçer. Bir yayın baskınlığı, 0 ile 1 arasında, onun tuttuğu paydır. Yükün tamamını taşıyan bir yay değişiklikleri artık ağın geri kalanına iletemez; hiçbir şey taşımayan bir yayın da iletecek bir şeyi yoktur. Yayın öğrenme için yararlılığı, yazarların plastisite (plasticity) dediği nicelik, f(1 − f) çarpımıdır: iki uçta sıfır, yarıda en büyük.

Eğitimden önce yayların baskınlıkları ortalamaya yakın durur. Eğitim onları kutuplaştırır: bazı yaylar sonunda uçları arasındaki yükün neredeyse tamamını taşır, diğerleri neredeyse hiçbirini. Ve burada ekip kesin bir yasa kanıtlıyor. Ağın öğrenme kapasitesi C’yi elde etmek için tüm yayların plastisitesini toplayın; kutuplaşma P’yi elde etmek için baskınlıkların ortalamadan ne kadar saptığını ölçün. O zaman C + P bir sabittir ve yalnızca ağın yapısı tarafından belirlenir. Kazanılan her kutuplaşma kırıntısı, kaybedilen öğrenme kapasitesidir. Yazarlar P’ye ağın “uyku basıncı” diyor. Simülasyonlarda C yüksekken gelen görevler çok daha sık öğrenildi.

Gürültüyü dinlemek

Hasar geri alınabilir mi? İlke olarak evet: fazla baskın yayları zayıflatın, fazla zayıf olanları güçlendirin. Zorluk şu ki bir yayın baskınlığı tüm ağa bağlıdır. Ekip yerel bir kestirme buldu: ağı içeriden küçük rastgele kuvvetlerle sarsın; her yayın depoladığı ortalama enerji onun baskınlığını ele verir. Böylece her yayın yalnızca kendi sertliğine ve uzamasına ihtiyacı olur.

Görev ziyaretlerinin arasına yerleştirilen bu onarım, akış boyunca ağların öğrenmeyi sürdürmesini sağladı. 50 ağın 49’unda dinlenim sertliğine doğru kör bir gevşemeden daha iyi sonuç verdi. Hayvan uykusunun birkaç özelliğini de yansıttı. Yeni bir şey öğrenilmediğinde onarım zarar verdi; ziyaretlerin yaklaşık %40’ı yeni bir görev getirdiğinde ise en çok yardımı dokundu. Son üç onarım seansını atlamak “uyku basıncı”nın birikmesine yol açtı ve açığı kapatmak ek bir doz gerektirdi; ama bu doz, atlananın yalnızca %75,3’ü, altı seans kaçırıldıktan sonra ise %52,2’siydi.

Onarım neden beklemek zorunda

Neden öğrenirken onarmayalım? Çünkü süren bir görev, onu taşıyan yaylara ek gerilme bindirir. Bu yayların enerji okumaları yükselir (50 ağın hepsinde); bu yüzden onarım meşgul yayları aşırı baskın yaylarla karıştırır ve tam da kullanılan yolları yumuşatır. Görev sırasında yapılan onarım, çevrimdışı yapılan onarımdan çok daha kötü sonuçlar verdi.

Yanlılık okumaları hep yalnızca yukarı ittiği için, bir görev sırasında hâlâ zayıf görünen bir yay gerçekten zayıftır. Bu yüzden ekip bir bölüşüm denedi: “uyanıklık” sırasında güçlendir, yalnızca “uyku” sırasında zayıflat. Bu yöntem neredeyse tamamen çevrimdışı onarım kadar iyi sonuç verdi. Ters bölüşüm ise her ağda performansı düşürdü. Yazarlar, sıçanların görsel korteksinde bir paralelliğe dikkat çekiyor: orada etkinlik uyanıklık sırasında yukarı, uyku sırasında aşağı ayarlanıyor. Bu, yazarların sınanması gereken bir hipotez olarak sunduğu olası bir fiziksel açıklama.

Hâlâ dışarıdan çevrilen bir düğme

Ağlar uyumaya kendi başlarına karar vermiyor: dışarıdaki bir denetleyici öğrenmeyi ve onarımı zamanlıyor ve toparlanma hedefini belirliyor. Ayrıca onarım geçmiş görevler hakkında hiçbir şey bilmediği için anıları aşındırıyor; oysa biyolojik uyku günün deneyimlerini yeniden de etkinleştirir. Yazarların sıradaki soruları, öğrenen bir sistemin ne zaman kendiliğinden çevrimdışı bir evreye geçeceği ve rüya görmenin fiziksel bir biçiminin az önce öğrenilenleri koruyup koruyamayacağı.