historyBölüm 1·Tarih & İlham
AlexNet, GPU devrimi ve modern bilgisayarlı görünün doğuşu
Öğrenci için: mekanizma, temel formül, kod ve quiz.· 7 / 8 bölüm
Önce bunlara göz at
30 saniyede özet · Ne öğreneceksin
Backpropagation ağları eğitilebilir kıldı, ama derin öğrenmenin gerçekten patladığı an 2012 ImageNet yarışmasıdır. Alex Krizhevsky, Ilya Sutskever ve Geoffrey Hinton'ın AlexNet'i, rakibini %10.8 puan farkla ezdi. Fark o kadar büyüktü ki alan bir gecede kural-tabanlı yaklaşımları terk etti.
ImageNet: 14 milyon görüntü, 1000 kategori. Yıllık ILSVRC yarışmasında algoritmalar top-5 …
1. ReLU aktivasyonu: Tanh'tan ~6x hızlı yakınsama
AlexNet'ten önce GPU'lar grafik içindi. Krizhevsky, CUDA ile sinir ağlarını GPU'ya taşıdı:…
Önce tahmin et: AlexNet'in klasik bilgisayarlı görüyü bu kadar büyük farkla geçmesinin arkasındaki en belirleyici üçlü neydi?
2012'den bu yana ImageNet top-5 hata oranı %2.9'a indi — insan performansının (~%5.1) altında. Görüntü sınıflandırma pratikte çözülmüş sayılıyor; araştırma odağı üretken modeller ve dile kaydı. Sıradaki durak: attention ve Transformer.
Daha derinlemesine