İbrahim Bilgiç

Yapay zekânın hikâyesi

Kapak

Bir beyin kâğıda sığar mı?

Doğuş · 1943–1956

1943. Dünya savaştaydı. Chicago’da iki adam, nörolog Warren McCulloch ile yirmi yaşındaki matematikçi Walter Pitts, beynin en küçük parçasını kâğıda dökmeye çalışıyordu. Fikirleri basitti. Bir sinir hücresi, gelen sinyalleri toplayan küçük bir anahtar gibi düşünülebilirdi. Toplam yeterince büyüyünce anahtar “ateşlerdi”.

1950’de İngiliz matematikçi Alan Turing herkesin aklındaki soruyu açıkça sordu: Makineler düşünebilir mi? 1956 yazında bir grup bilim insanı Dartmouth’ta toplandı. Bu yeni alana bir ad verdiler: yapay zekâ. Dikkatle seçilmiş bir ekibin bir yaz boyunca çalışarak büyük ilerleme kaydedebileceğine inanıyorlardı.

  1. 1943
    Yapay nöronun ilk matematiksel modeliBir nöronu, girdileri toplayıp bir eşiği aşınca "ateşleyen" basit bir mantık birimi olarak tarif ettiler.

    Neden önemli Bugünkü her yapay sinir ağının atası bu tek sayfalık fikirdir.

    Fikir · Warren McCulloch, Walter Pitts

  2. 1949
    Hebb kuralı: birlikte ateşleyenler birlikte bağlanırÖğrenmenin, birlikte etkinleşen nöronlar arasındaki bağlantıların güçlenmesiyle gerçekleştiğini öne sürdü.

    Neden önemli Bir ağın "öğrenmesi" fikrine ilk biyolojik dayanak; ağırlık güncelleme kurallarının ilham kaynağı.

    Fikir · Donald Hebb

  3. 1950
    Makineler düşünebilir mi?Soruyu "taklit oyunu" ile değiştirdi: bir makine, yazışmada kendini insandan ayırt edilemez kılabilir mi?

    Neden önemli Yapay zekânın felsefi başlangıç noktası; bugün hâlâ tartışılan Turing testi.

    Fikir · Alan Turing

  4. 1956
    Dartmouth yaz çalıştayı: "yapay zekâ" adı konur1955’te yazılan önerge, "öğrenmenin her yönü ilke olarak bir makineyle taklit edilebilecek kadar kesin tarif edilebilir" varsayımıyla bir yaz çalışması önerdi.

    Neden önemli Alanın adını ve iddiasını koyan toplantı.

    Olay · John McCarthy, Marvin Minsky, Nathaniel Rochester, Claude Shannon

  5. 1956
    Logic TheoristPrincipia Mathematica’daki teoremleri kendi kendine kanıtlayan program.

    Neden önemli Sembolik yapay zekânın ilk çalışan örneği: düşünmeyi kural ve arama olarak modellemek.

    Makine · Allen Newell, Herbert Simon, Cliff Shaw

Büyük vaatler, soğuk bir kış

Altın çağ ve ilk kış · 1957–1979

1958’de Frank Rosenblatt örneklerden öğrenen bir makine tanıttı. Adı algılayıcıydı. Gazeteler, yakında yürüyüp konuşacak ve kendi varlığının farkına varacak makinelerden söz etti. 1966’da ELIZA adlı basit bir program bir psikoterapisti taklit etti. Onu deneyen bazı insanlar programla dertleşmeye başladı.

Ama vaatler tutmadı. 1969’da Minsky ve Papert, tek katmanlı ağların neleri asla yapamayacağını bir kitapla gösterdi. 1973’te İngiltere’deki Lighthill Raporu alanı sert biçimde eleştirdi ve destekler kesildi. Yapay zekâ ilk “kışına” girdi.

  1. 1958
    Algılayıcı (perceptron)Örneklerden öğrenen ilk yapay nöron. Ağırlıklarını hatasına göre kendisi ayarlıyordu; Mark I Perceptron adıyla donanım olarak da yapıldı.

    Neden önemli Öğrenmenin, programlamak yerine örnek göstermekle olabileceğini kanıtladı.

    Makine · Frank Rosenblatt

  2. 1959
    "Makine öğrenmesi" terimiKendi kendine oynayarak dama oynamayı öğrenen bir program yazdı ve bu yaklaşıma makine öğrenmesi dedi.

    Neden önemli Bir programın, programcısından daha iyi oynayabileceğini gösterdi.

    Makine · Arthur Samuel

  3. 1966
    ELIZABasit kalıp eşleştirmeyle bir psikoterapisti taklit eden sohbet programı.

    Neden önemli İnsanların, anlamayan bir makineye kolayca anlam yüklediğini ilk gösteren deney. Bugünkü sohbet botlarının uzak atası.

    Makine · Joseph Weizenbaum

  4. 1969
    Perceptrons kitabıTek katmanlı algılayıcının XOR gibi basit problemleri çözemeyeceğini matematiksel olarak gösterdiler.

    Neden önemli Sinir ağı araştırmalarına olan ilgiyi yaklaşık on beş yıl soğuttu.

    Fikir · Marvin Minsky, Seymour Papert

  5. 1973
    Lighthill Raporu ve ilk yapay zekâ kışıBirleşik Krallık hükümeti için yazılan rapor, yapay zekânın vaatlerini yerine getirmediği sonucuna vardı.

    Neden önemli Fonların kesildiği, alanın uzun süre durgunlaştığı dönemi başlattı.

    Olay · James Lighthill

Kuralları biz mi yazalım, makine mi öğrensin?

Uzman sistemler ve sinir ağlarının dönüşü · 1980–2005

1980’lerde şirketler yeni bir fikre para yatırdı. Uzmanların bilgisini binlerce “eğer… ise…” kuralına dökeceklerdi. XCON gibi uzman sistemler bilgisayar siparişlerini doğru hazırlayarak gerçekten para kazandırdı. Ama her yeni durum yeni bir kural istiyordu. Sistemler büyüdükçe kırılganlaştı.

Küçük bir grup araştırmacı ise eski bir fikirden vazgeçmedi. Onlara göre makine, kuralları örneklerden kendi kendine öğrenmeliydi. 1986’da geri yayılım yöntemi yaygınlaştı. 1990’larda Yann LeCun’un ağları banka çeklerindeki el yazısı rakamları okumaya başladı. 1997’de IBM’in Deep Blue’su dünya satranç şampiyonu Kasparov’u yendi.

  1. 1980
    Uzman sistemler sahaya iniyor: XCONBilgisayar siparişlerini binlerce kuralla yapılandıran sistem, şirkete ciddi tasarruf sağladı.

    Neden önemli Yapay zekânın ilk büyük ticari başarısı; ama kuralları yazmanın ve güncellemenin ne kadar pahalı olduğunu da gösterdi.

    Makine · John McDermott, Digital Equipment Corporation

  2. 1982
    Hopfield ağıAnıları bir enerji yüzeyinin çukurları olarak saklayan, eksik bir girdiden tam anıyı geri çağıran ağ.

    Neden önemli Fizikten gelen fikirleri sinir ağlarına taşıdı; 2024 Nobel Fizik Ödülü’nün gerekçelerinden biri.

    Fikir · John Hopfield

  3. 1986
    Geri yayılım (backpropagation)Çok katmanlı bir ağın her ağırlığının hataya katkısını zincir kuralıyla sondan başa hesaplama yöntemini yaygınlaştırdılar.

    Neden önemli Gizli katmanlı ağları eğitilebilir kıldı; Minsky ve Papert’in gösterdiği sınırı aştı. Bugün her derin ağ böyle eğitilir.

    Fikir · David Rumelhart, Geoffrey Hinton, Ronald Williams

  4. 1992
    TD-GammonKendine karşı oynayarak öğrenen bir sinir ağı, tavlada dünyanın en iyi oyuncularına yaklaştı.

    Neden önemli Pekiştirmeli öğrenme ile sinir ağlarının birleşiminin ilk büyük başarısı; AlphaGo’nun öncüsü.

    Makine · Gerald Tesauro

  5. 1997
    LSTMUzun dizilerde bilgiyi kapılarla tutup bırakabilen yinelemeli ağ hücresi.

    Neden önemli Konuşma tanıma ve çeviride yirmi yıl boyunca standart oldu.

    Model · Sepp Hochreiter, Jürgen Schmidhuber

  6. 1997
    Deep Blue, Kasparov’u yenerSaniyede yüz milyonlarca konumu değerlendiren özel donanım, altı oyunluk maçta dünya satranç şampiyonunu yendi.

    Neden önemli Kaba kuvvet aramanın gücünün sembolü. Öğrenmeye değil, aramaya ve uzman bilgisine dayanıyordu.

    Olay · IBM

  7. 1998
    LeNet-5 ve evrişimli ağlarEl yazısı rakamları okuyan evrişimli ağ; ABD’de banka çeklerini okumak için kullanıldı.

    Neden önemli Görüntüdeki yerel desenleri paylaşılan filtrelerle yakalama fikri, bugünkü görüntü modellerinin temeli.

    Model · Yann LeCun, Léon Bottou, Yoshua Bengio, Patrick Haffner

Makineler görmeye başlıyor

Derin öğrenme devrimi · 2006–2016

2000’lerin sonunda üç şey bir araya geldi: internette biriken milyonlarca fotoğraf, oyunlar için yapılmış güçlü ekran kartları ve sabırla geliştirilmiş birkaç fikir. 2009’da hazırlanan ImageNet, makinelere devasa bir resim albümü verdi. Albümdeki her fotoğrafın üstünde ne gösterdiğini söyleyen bir etiket vardı.

2012’de AlexNet adlı bir ağ, ImageNet yarışmasında rakiplerini açık farkla geçti. Birkaç yıl içinde makineler fotoğraf tanımada, konuşmayı yazıya dökmede ve oyunlarda insan düzeyine yaklaştı. 2016’da AlphaGo, Go oyununda dünyanın en iyi oyuncularından Lee Sedol’u yendi. Bu oyunda bilgisayarların uzun yıllar kazanamayacağı düşünülüyordu.

  1. 2006
    Derin inanç ağlarıÇok katmanlı ağları katman katman ön eğitimle başlatmanın bir yolunu gösterdiler.

    Neden önemli "Derin öğrenme" adının ve ilgisinin yeniden doğuşu.

    Fikir · Geoffrey Hinton, Simon Osindero, Yee-Whye Teh

  2. 2009
    ImageNetMilyonlarca etiketli görüntüden oluşan veri seti ve her yıl düzenlenen yarışma.

    Neden önemli Veri ölçeğinin, algoritma kadar önemli olduğunu gösterdi; derin öğrenmenin sahnesi oldu.

    Olay · Fei-Fei Li ve ekibi

  3. 2012
    AlexNetİki ekran kartında eğitilen derin evrişimli ağ, ImageNet yarışmasını açık farkla kazandı.

    Neden önemli Derin öğrenme çağının başladığı an olarak kabul edilir.

    Model · Alex Krizhevsky, Ilya Sutskever, Geoffrey Hinton

  4. 2013
    word2vecKelimeleri, anlam ilişkilerini koruyan vektörlere dönüştüren hızlı bir yöntem: kral − erkek + kadın ≈ kraliçe.

    Neden önemli Gömme (embedding) fikrini herkesin kullanabileceği hâle getirdi.

    Model · Tomáš Mikolov ve ekibi

  5. 2013
    Değişkenli otomatik kodlayıcı (VAE)Veriyi düzenli bir gizli uzaya sıkıştırıp oradan yeni örnekler üretebilen model.

    Neden önemli Üretken modellerin matematiksel temellerinden biri.

    Model · Diederik Kingma, Max Welling

  6. 2014
    Üretken çekişmeli ağlar (GAN)Biri sahte üreten, diğeri sahteyi yakalamaya çalışan iki ağın birbirini eğitmesi.

    Neden önemli Gerçekçi görüntü üretiminin ilk büyük sıçraması.

    Model · Ian Goodfellow ve ekibi

  7. 2014
    Dikkat mekanizmasıÇeviri yaparken modelin, kaynak cümlenin hangi kelimelerine bakacağını kendisinin seçmesi.

    Neden önemli Transformer’ın çekirdeğindeki fikir burada doğdu.

    Fikir · Dzmitry Bahdanau, Kyunghyun Cho, Yoshua Bengio

  8. 2015
    Atari oynayan derin Q-ağı (DQN)Yalnızca ekran pikselleri ve skoru görerek onlarca Atari oyununu oynamayı öğrenen ajan.

    Neden önemli Derin öğrenme ile pekiştirmeli öğrenmenin birleşimini ana akım yaptı.

    Model · Volodymyr Mnih ve DeepMind ekibi

  9. 2015
    ResNetKatmanların yanından geçen "kestirme yollar" sayesinde yüzlerce katmanlı ağlar eğitilebildi.

    Neden önemli Artık bağlantılar, Transformer dahil bugünkü neredeyse her derin modelde var.

    Model · Kaiming He, Xiangyu Zhang, Shaoqing Ren, Jian Sun

  10. 2016
    AlphaGo, Lee Sedol’u yenerDerin ağlar, ağaç araması ve kendine karşı oynayarak öğrenmeyi birleştiren sistem, Go’da dünyanın en iyilerinden birini 4–1 yendi.

    Neden önemli Uzmanların on yıl daha uzakta olduğunu düşündüğü bir eşik aşıldı.

    Olay · DeepMind

Dikkat: her şeyi değiştiren fikir

Transformer çağı · 2017–2021

2017’de Google’daki bir ekip kısa ve iddialı başlıklı bir makale yayımladı: “Attention Is All You Need”. Türkçesi “İhtiyacın olan tek şey dikkat”. Anlattıkları Transformer, bir cümledeki her kelimenin diğer bütün kelimelere aynı anda bakabilmesini sağlıyordu.

Fikir kısa sürede dilin ötesine taştı. Aynı yapı görüntüleri, sesi, hatta proteinlerin şeklini anlamakta kullanıldı. Araştırmacılar bir şey daha fark etti. Model ve veri büyüdükçe modeller öngörülebilir biçimde iyileşiyordu. 2020’de GPT-3, yalnızca birkaç örnek görerek yeni işler yapabildiğini gösterdi.

  1. 2017
    Attention Is All You NeedYinelemeyi tamamen bırakıp yalnızca dikkat mekanizmasıyla çalışan Transformer mimarisi.

    Neden önemli Bugünkü bütün büyük dil modellerinin temeli. Paralel eğitilebildiği için ölçeklenmeyi mümkün kıldı.

    Model · Ashish Vaswani ve Google ekibi

  2. 2018
    BERT ve GPT: önce oku, sonra uzmanlaşBüyük metin yığınlarında genel ön eğitim, ardından küçük bir görevde ince ayar.

    Neden önemli Her görev için sıfırdan model eğitme dönemini bitirdi.

    Model · Google (BERT), OpenAI (GPT)

  3. 2020
    Ölçekleme yasalarıModel boyutu, veri ve hesap arttıkça hatanın öngörülebilir bir güç yasasıyla düştüğünü gösterdiler.

    Neden önemli Büyük modellere yatırımın bilimsel gerekçesi oldu.

    Fikir · Jared Kaplan ve OpenAI ekibi

  4. 2020
    GPT-3: birkaç örnekle öğrenme175 milyar parametreli model, yalnızca istemde gösterilen birkaç örnekle yeni görevleri yapabildi.

    Neden önemli İstem (prompt) yazmanın bir mühendislik becerisine dönüştüğü an.

    Model · OpenAI

  5. 2020
    Difüzyon modelleriGörüntüye adım adım gürültü ekleyip, sonra bu süreci tersine çevirmeyi öğrenen üretken model.

    Neden önemli Bugünkü görüntü ve video üretim modellerinin temeli.

    Model · Jonathan Ho, Ajay Jain, Pieter Abbeel

  6. 2020
    Getirmeyle desteklenmiş üretim (RAG)Modelin cevap üretmeden önce ilgili belgeleri bulup bağlam olarak kullanması.

    Neden önemli Modelleri kendi verinle güvenilir biçimde kullanmanın standart yolu oldu.

    Fikir · Patrick Lewis ve Meta ekibi

  7. 2021
    AlphaFold 2Bir proteinin amino asit dizisinden üç boyutlu yapısını deneysel doğruluğa yakın tahmin eden model.

    Neden önemli Yapay zekânın bilimsel keşfe en büyük katkılarından biri; 2024 Nobel Kimya Ödülü.

    Model · John Jumper, Demis Hassabis ve DeepMind

  8. 2021
    CLIP: görüntü ve dili aynı uzaydaİnternetten toplanan görüntü-açıklama çiftleriyle görüntüleri ve metinleri ortak bir vektör uzayına yerleştiren model.

    Neden önemli Metinden görüntü üretimini ve çok kipli modelleri mümkün kılan parçalardan biri.

    Model · Alec Radford ve OpenAI ekibi

Yapay zekâ herkesin cebine giriyor

Üretken yapay zekâ · 2022–bugün

2022’nin sonunda ChatGPT yayımlandı. Kısa sürede milyonlarca insanın tanıştığı ilk yapay zekâ oldu. Arkasındaki fikir yeni değildi. Sıradaki kelimeyi tahmin eden bir dil modeli, insanların hangi cevapları daha yararlı bulduğuna göre yeniden eğitilmişti.

Bugün modeller resim çiziyor ve kod yazıyor. Cevap vermeden önce adım adım düşünüyor, araç kullanarak işleri kendi başına yürütüyor. Hikâyenin bu bölümü hâlâ yazılıyor ve sen de onun içindesin.

  1. 2022
    Düşünce zinciriModelden cevaptan önce adımlarını yazmasını istemenin akıl yürütme başarısını belirgin biçimde artırdığını gösterdiler.

    Neden önemli Akıl yürüten modellerin öncüsü olan basit bir istem fikri.

    Fikir · Jason Wei ve Google ekibi

  2. 2022
    İnsan geri bildirimiyle hizalama (InstructGPT)İnsanların tercih ettiği cevapları ödüllendiren bir ödül modeliyle dil modelini pekiştirmeli öğrenmeyle ayarlama (RLHF).

    Neden önemli Ham bir metin tamamlayıcıyı, talimat izleyen bir asistana dönüştüren adım.

    Fikir · Long Ouyang ve OpenAI ekibi

  3. 2022
    Stable DiffusionDifüzyonu sıkıştırılmış bir gizli uzayda çalıştırarak metinden görüntü üretimini sıradan bilgisayarlara taşıyan açık model.

    Neden önemli Görüntü üretimini herkesin erişimine açtı.

    Model · Robin Rombach ve ekibi

  4. 2022
    ChatGPT30 Kasım 2022’de yayımlanan sohbet arayüzünün, yaklaşık iki ayda 100 milyon kullanıcıya ulaştığı tahmin edildi.

    Neden önemli Yapay zekânın bir araştırma konusundan gündelik bir araca dönüştüğü an.

    Olay · OpenAI

  5. 2023
    GPT-4, LLaMA ve ClaudeÇok kipli büyük modeller ve açık ağırlıklı modeller aynı yıl yaygınlaştı.

    Neden önemli Büyük dil modelleri hem kapalı hem açık ekosistemde hızla çoğaldı.

    Model · OpenAI, Meta, Anthropic

  6. 2024
    Nobel ödülleri yapay zekâyaFizik ödülü yapay sinir ağlarının temellerine, kimya ödülü protein yapısı tahmini ve tasarımına verildi.

    Neden önemli Alanın bilimsel önemine verilen en üst düzey tanınma.

    Olay · John Hopfield, Geoffrey Hinton (Fizik) · Demis Hassabis, John Jumper, David Baker (Kimya)

  7. 2024
    Model Context Protocol (MCP)Modellerin dış araçlara ve veri kaynaklarına bağlanması için açık bir standart.

    Neden önemli Ajanların araç kullanımını ortak bir dile kavuşturdu.

    Fikir · Anthropic

  8. 2025
    Akıl yürüten modellerCevap vermeden önce uzun bir iç düşünce süreci yürüten modeller; DeepSeek-R1 bu yeteneğin yalnızca pekiştirmeli öğrenmeyle de geliştirilebildiğini açıkça yayımladı.

    Neden önemli Matematik, kod ve çok adımlı problemlerde büyük sıçrama; ajanların temeli.

    Model · OpenAI, DeepSeek, Anthropic, Google ve diğerleri

Modellerin içi

1958’den 2020’ye · dokuz mimari

Bugünkü bütün sistemlerin üstüne kurulduğu makineler, ortaya çıktıkları sırayla. Her birinin çalışan hâli Atlas’ta.

Kapak

Algılayıcı

Perceptron · 1958

Girdileri ağırlıklarıyla çarpıp toplayan, toplam bir eşiği geçerse "evet" diyen tek bir yapay nöron.

  1. Her girdi bir ağırlıkla çarpılır ve sonuçlar toplanır.
  2. Toplama bir sapma (bias) eklenir.
  3. Toplam sıfırdan büyükse çıktı 1, değilse 0 olur.
  4. Yanlış karar verirse ağırlıklar hatanın yönünde biraz düzeltilir.

Nerede kullanılır Düz bir çizgiyle ayrılabilen iki sınıfı ayırmak. Bugün tek başına değil, büyük ağların yapı taşı olarak yaşıyor.

Sınırı Yalnızca düz bir karar sınırı çizebilir; XOR gibi problemleri çözemez.

Çok katmanlı ağ

Multilayer perceptron (MLP) · 1986

Nöronları katmanlar hâlinde dizip aralarına doğrusal olmayan bir fonksiyon koyunca, ağ eğri karar sınırları çizebilir.

  1. Girdi katmanı veriyi alır.
  2. Gizli katmanlar, her biri bir önceki katmanın çıktısını işleyerek giderek soyut özellikler çıkarır.
  3. Çıktı katmanı tahmini üretir; hata ölçülür.
  4. Geri yayılım her ağırlığın hataya katkısını hesaplar, gradyan iniş ağırlıkları günceller.

Nerede kullanılır Tablo verisi, sınıflandırma, regresyon. Transformer bloklarının içinde de birer çok katmanlı ağ vardır.

Sınırı Görüntü ve dizi gibi yapılı verideki düzeni kendiliğinden kullanmaz; çok veri ister.

Evrişimli ağ

Convolutional neural network (CNN) · 1989–2012

Küçük bir filtreyi görüntünün üzerinde kaydırarak her yerde aynı deseni arar. Kenar, köşe, doku, sonra nesne parçaları.

  1. Filtreler görüntü üzerinde kayarak özellik haritaları üretir.
  2. Havuzlama, haritaları küçültüp önemli bilgiyi korur.
  3. Katmanlar ilerledikçe basit desenler karmaşık nesnelere dönüşür.
  4. Son katmanlar bu özelliklerden sınıf tahmini yapar.

Nerede kullanılır Görüntü tanıma, tıbbi görüntüleme, yüz tanıma, otonom araçların algısı.

Sınırı Görüntünün uzak bölgeleri arasındaki ilişkiyi kurmakta zorlanır; Transformer tabanlı görüntü modelleri bu yüzden yükseldi.

Yinelemeli ağ ve LSTM

Recurrent neural network, LSTM · 1997

Diziyi kelime kelime okur ve okuduklarını bir "hafıza" vektöründe taşır. LSTM, neyi hatırlayıp neyi unutacağına kapılarla karar verir.

  1. Her adımda bir girdi ve önceki hafıza durumu alınır.
  2. Unutma kapısı eski bilginin ne kadarının silineceğine karar verir.
  3. Girdi kapısı yeni bilginin ne kadarının yazılacağına karar verir.
  4. Çıktı kapısı hafızadan bu adıma ne aktarılacağını belirler.

Nerede kullanılır Transformer’dan önce konuşma tanıma, makine çevirisi ve zaman serilerinde standarttı.

Sınırı Adım adım çalıştığı için paralel eğitilemez; çok uzak bağlamı tutmakta zorlanır.

Otomatik kodlayıcı ve VAE

Autoencoder, Variational autoencoder · 2013

Veriyi dar bir boğazdan geçirip yeniden kurmayı öğrenen ağ. Boğazda kalan küçük vektör, verinin özüdür.

  1. Kodlayıcı girdiyi küçük bir gizli vektöre sıkıştırır.
  2. Çözücü bu vektörden girdiyi yeniden kurar.
  3. Hata, girdi ile yeniden kurulan arasındaki farktır.
  4. VAE, gizli uzayı düzenli tutar; oradan örnek alarak yeni veri üretilebilir.

Nerede kullanılır Boyut indirgeme, gürültü temizleme, anomali tespiti; Stable Diffusion’ın gizli uzayı da bir otomatik kodlayıcıdır.

Sınırı Tek başına ürettiği görüntüler genelde bulanıktır.

Üretken çekişmeli ağ

Generative adversarial network (GAN) · 2014

Bir sahteci ve bir dedektif: biri gerçekçi sahte örnekler üretir, diğeri gerçeği sahteden ayırmaya çalışır. İkisi birbirini geliştirir.

  1. Üretici rastgele gürültüden bir örnek üretir.
  2. Ayırt edici, gerçek ve üretilmiş örneklere bakıp hangisinin gerçek olduğunu tahmin eder.
  3. Ayırt edici yanılmamayı, üretici onu yanıltmayı öğrenir.
  4. Denge kurulduğunda üretilen örnekler gerçeğe çok yakındır.

Nerede kullanılır Gerçekçi yüz ve görüntü üretimi, süper çözünürlük, stil aktarımı.

Sınırı Eğitimi kararsızdır; üretici bazen tek bir türde takılı kalır.

Transformer

Transformer · 2017

Her kelimenin, cümledeki bütün kelimelere aynı anda bakıp hangilerinin önemli olduğuna karar vermesi. Dikkat (attention), tek bir mimariyle dilden görüntüye her şeyi işler.

  1. Metin token’lara bölünür; her token bir vektöre ve konum bilgisine dönüşür.
  2. Öz-dikkat katmanında her token sorgu, anahtar ve değer vektörleri üretir; hangi token’lara bakacağını hesaplar.
  3. Her blokta bir çok katmanlı ağ, artık bağlantı ve normalizasyon vardır; bu blok onlarca kez üst üste konur.
  4. Son katman bir sonraki token için olasılık dağılımı üretir.

Nerede kullanılır Bütün büyük dil modelleri (GPT, Claude, Gemini, Llama), çeviri, kod üretimi, görüntü ve ses modelleri.

Sınırı Dikkatin maliyeti bağlam uzunluğunun karesiyle büyür; çok veri ve hesap ister.

Difüzyon modeli

Diffusion model · 2020

Bir görüntüye adım adım gürültü eklenir; model bu süreci tersine çevirmeyi, yani gürültüyü adım adım temizlemeyi öğrenir.

  1. Eğitimde gerçek görüntülere farklı miktarlarda gürültü eklenir.
  2. Model, her adımda eklenen gürültüyü tahmin etmeyi öğrenir.
  3. Üretimde saf gürültüden başlanır; model gürültüyü onlarca adımda temizler.
  4. Metin koşulu (ör. CLIP ile) hangi görüntünün ortaya çıkacağını yönlendirir.

Nerede kullanılır Metinden görüntü ve video üretimi (Stable Diffusion, Midjourney, Sora benzeri modeller), ses üretimi.

Sınırı Çok adımlı olduğu için üretim yavaştır; hızlandırma için ayrı teknikler gerekir.

Pekiştirmeli öğrenme

Reinforcement learning · 1950’ler → 2015

Bir ajan bir ortamda eylem yapar, ödül ya da ceza alır ve zamanla toplam ödülü en çoklayan davranışı öğrenir. Kimse ona doğru hareketi söylemez.

  1. Ajan ortamın durumunu gözlemler.
  2. Bir eylem seçer; ortam yeni bir duruma geçer ve bir ödül verir.
  3. Ajan, hangi durumda hangi eylemin uzun vadede daha çok ödül getirdiğini tahmin etmeyi öğrenir.
  4. Keşif ile bildiğini kullanma arasında denge kurarak davranışını iyileştirir.

Nerede kullanılır Oyunlar (AlphaGo), robotik, dil modellerinin insan geri bildirimiyle hizalanması (RLHF), akıl yürüten modeller.

Sınırı Ajan istediğini değil puanladığını öğrenir; ödülü yanlış tasarlarsan "hile" bulur.

Hikâyenin nasıl çalıştığını merak ediyorsan

Bu bölümlerde adı geçen fikirlerin çoğunu sitede çalışan makinelerle deneyebilirsin. Başlamak için iki soru:

Fotoğraflar