Aylık 200 dolarlık Claude aboneliğimi iptal edip yerel çözümlere geçtim. İşte siz de neden yapmalısınız:

@onchainmilady
İNGILIZCE4 hafta önce · 19 Haz 2026
457K
137
21
5
539

TL;DR

Bu makale, yapay zekanın geleceğinin yerel çözümlerde olduğunu savunuyor ve birleşik bellek donanımlarının, kullanıcıların DeepSeek R1 gibi devasa açık kaynaklı modelleri abonelik, hız sınırı veya gizlilik riski olmadan çalıştırmasına nasıl olanak tanıdığını detaylandırıyor.

Yerel AI çalıştırmak, kimsenin konuşmadığı en kolay 100 bin dolarlık MRR iş modeli.

Sıfır API maliyeti. Hız sınırı yok. OpenAI bağımlılığı yok. Sadece saf kar marjı.

İşte bilmeniz gereken her şey:

Yapay zekanın geleceği bulutta değil.

Hiçbir zaman da olmadı.

Sadece donanımın bize yetişmesini bekliyorduk.

Bu bekleme bitti.

Milady - inline image

Yerel AI neden her zaman kazanır

ChatGPT, Claude veya Gemini kullandığınızda gerçekte olan şudur:

Yazdığınız komut cihazınızdan çıkar. Bir veri merkezine gider. Kontrol etmediğiniz bir şirket onu okur, kaydeder, filtreler ve size hangi cevabı almanıza izin verildiğine karar verir.

Sonra da bu ayrıcalık için size aylık fatura keserler.

Yerel AI tüm bunları tersine çeviriyor.

Sizin modeliniz.

Sizin donanımınız.

Sizin veriniz.

Hiçbir şey makineden çıkmaz.

Abonelik yok.

Hız sınırı yok.

"Buna yardımcı olamam" yok.

Her oturumda sıfırlanan bir bağlam penceresi yok.

OpenAI sunucuları, gerçekten ihtiyacınız olduğunda gece 2'de çöktüğünde kesinti yok.

Ve tarihte ilk kez, donanım yeterince iyi.

Donanım sorunu çözüldü

Yakın zamana kadar, ciddi LLM'leri yerel olarak çalıştırmak tek bir anlama geliyordu: masanızın altında 10.000 doların üzerinde bir NVIDIA GPU düzeneği.

24GB VRAM'e sahip özel bir GPU, 13B modelini kaldırabilirdi. Kuantize edip kalite düşüşünü kabul ederseniz belki 34B'yi. Daha büyük herhangi bir şey bir sunucu odası sorunuydu.

Bu dönem hızla sona eriyor.

Atılım, CPU ve GPU'nun aynı RAM havuzunu paylaştığı ve kompakt bir çipin eskiden donanım rafları gerektiren modelleri çalıştırmasına olanak tanıyan birleşik bellek.

AMD az önce bunu herkes için gerçeğe dönüştüren makineyi piyasaya sürdü.

Milady - inline image

AMD Ryzen AI Halo ile tanışın

CES 2026'da tanıtıldı. Şu anda Micro Center'da 3.999 dolara satışta.

Bu, AMD'nin NVIDIA'nın DGX Spark'ına doğrudan cevabı.

Görünürde bir bulut API'si olmadan ciddi AI iş yüklerini çalıştıran, kalın bir kitap boyutunda (149 x 149 x 43mm) bir mini PC.

İçinde ne var:

Ryzen AI Max+ 395, 16 Zen 5 çekirdeği, 32 iş parçacığı, 5.1GHz'e kadar

CPU ve GPU arasında paylaşılan 128GB LPDDR5X-8000 birleşik bellek

Radeon 8060S, 40 RDNA 3.5 hesaplama birimi

50 TOPS değerinde XDNA 2 NPU

2TB PCIe 4 SSD

10GbE LAN, Wi-Fi 7, Bluetooth 5.4

Windows 11 Pro veya Linux, seçiminiz, aynı fiyat

Mağazadan teslim alma 10 Temmuz 2026'ya kadar mevcut.

Her şeyi değiştiren şey o 128GB birleşik bellek havuzu.

Çoğu AI kutusunun darboğazı VRAM'dir. 128GB sistem RAM'iniz olabilir ancak yalnızca 24GB GPU belleğiniz olabilir, ki model aslında orada çalışır. Birleşik bellek bu ayrımı ortadan kaldırır. GPU, 128GB'ın tamamını görür.

AMD burada durmuyor.

Ryzen AI Max+ PRO 495'e sahip bir takip varyantı, 2026'nın 3. çeyreğinde, 192GB'a kadar birleşik belleği ve 300 milyar parametreye kadar modelleri destekleyerek gelecek.

Milady - inline image

Şu anda üzerinde gerçekte neler çalıştırabilirsiniz

2026'daki açık kaynak model manzarası, bir yıl öncekiyle hiç alakası yok.

DeepSeek R1, 671B parametre.

Manşet bu.

Toplam 671 milyar parametre.

Bir Uzmanlar Karışımı modeli olarak çalışır, yani her çıkarım geçişinde yalnızca yaklaşık 37B parametre aktiftir, bu yüzden onu tüketici donanımında çalıştırabilirsiniz.

128GB birleşik bellekte 4-bit niceleme ile çalışır.

Hızlı değil, ama çalışıyor.

Kalite, akıl yürütme görevlerinde sınır ötesi bulut modelleriyle gerçekten rekabet edebilir.

Qwen3, 235B MoE.

Alibaba'nın en son modeli.

Ayrıca bir Uzmanlar Karışımı mimarisi.

Q4 nicelemede 128GB'a rahatça sığar.

Güçlü çok dilli destek, kodda mükemmel.

Llama 3.1, 405B.

Meta'nın en büyük açık modeli.

Agresif niceleme ile 128GB'a sıkıştırılabilir.

Q2'de sığar, kalite düşer.

Q3'te gelecek olan 192GB PRO 495 varyantında, bu modeller daha yüksek hassasiyette ve daha hızlı çalışır.

Bu, tek makine tüketici donanımındaki mevcut tavan. 671B parametreli akıl yürütme modelleri. Yerel olarak. Çevrimdışı.

Milady - inline image

Çoğu kişinin gözden kaçırdığı 100 bin dolarlık MRR açısı

AI altyapı maliyetleriniz ayda 5.000 dolar API ücreti yerine ayda 0 dolar olduğunda, birim ekonominiz tamamen değişir.

Bulut API'lerinde kârsız olacak AI ürünleri oluşturabilir ve onları ilk günden itibaren nakit akışı pozitif hale getirebilirsiniz. Özel AI asistanları, özel belge işleme, verilerini OpenAI'e gönderemeyen şirketler için yerel kodlama araçları, sıfır veri paylaşım riski olan tıbbi ve hukuki AI.

3.999 dolarlık donanım maliyeti, tek seferlik sabit bir maliyettir. Ondan sonra hizmet verdiğiniz her müşteri saf kar marjıdır.

Milady - inline image

Gizlilik argümanı tek başına buna değer

ChatGPT veya Claude'a gerçekte ne koyduğunuzu bir düşünün.

İş stratejisi. Hukuki sorular. Kişisel sorunlar. Özel mantığa sahip kod. Tıbbi belirtiler. Finansal planlar.

Her komut kaydedilir. Potansiyel olarak eğitim için kullanılır. Sunucuların bulunduğu ülkenin yasalarına tabidir. Mahkeme celbine tabidir. Şirketin istediği zaman şartlarını değiştirmesine tabidir.

Yerel AI ile bunların hiçbiri yok.

Modeliniz RAM'de çalışır. Konuşmalarınız makineden çıkmaz. İnternet bağlantısını tamamen kesebilirsiniz ve yine de çalışır.

Finans, sağlık veya hukuk alanındaki müşteriler için ürünler geliştiren herkes için bu, "olsa iyi olur" değil, mümkün olan tek seçenektir.

Birinci yıldan sonraki maliyet hesabı

3.999 dolar, rakamları hesaplayana kadar çok gibi geliyor.

Claude Pro: Aylık 20 dolar

ChatGPT Plus: Aylık 20 dolar

Gerçekten bir şeyler inşa ediyorsanız API maliyetleri: Hacme bağlı olarak ayda 200 ila 2.000 dolar

Bulut AI'nın birinci yılı: kolayca 2.400 ila 24.000 dolar+

İkinci yıl: yine aynı

Üçüncü yıl: yine aynı

Ryzen AI Halo, kendi maliyetini çıkarır. Sonra da kazandırmaya devam eder.

Ve sıfır token başına maliyetle, hız sınırı olmadan ve yoğun saatlerde hizmet kalitesi düşmeden 7/24 çalışır.

Geçiş yapmadan önce BİLMENİZ GEREKENLER

Bu bir satış konuşması değil. Gerçek ödünleşimler var.

Hız, ChatGPT hızında değil. Ağır nicelemede 671B üzerinde yerel çıkarım, saniyede 3 ila 8 tokena düşebilir. Qwen3 235B MoE, bu donanımda saniyede yaklaşık 15 ila 25 token ile daha hızlı çalışır. Kullanılabilir, ancak beklentileri ayarlayın.

Kurulumun bir öğrenme eğrisi var. Ollama, LM Studio ve AMD'nin Lemonade platformu bunu yönetilebilir kılıyor, ancak yine de modelleri, niceleme seviyelerini ve bağlam uzunluklarını seçiyorsunuz. Henüz tek tıklamalık değil.

Modeller harika ancak sınır ötesi modellerle aynı değil. DeepSeek R1 ve Qwen3 235B gerçekten rekabetçi. Ancak belirli niş görevler için, tavanındaki GPT-4o veya Claude 3.7 Sonnet hala önde.

AMD'nin yazılım yığını hala NVIDIA'ya yetişiyor. ROCm önemli ölçüde gelişti ve llama.cpp, RDNA donanımında iyi çalışıyor, ancak NVIDIA'nın ekosistem desteği daha geniş.

Tamamen yerel olmalı mısınız?

Bir geliştirici, araştırmacı veya hassas verileri olan müşteriler için AI ürünleri geliştiriyorsanız, evet. Donanım orada. Modeller orada. Yazılım hızla olgunlaşıyor.

AI'yı haftada birkaç kez kullanan sıradan bir kullanıcıysanız, henüz değil. Bulut araçları hala daha kullanışlı ve maliyet hesabı donanım yatırımını haklı çıkarmıyor.

Ancak her şeyin hareket ettiği yön şu:

Modeller aynı anda hem küçülüyor hem de daha yetenekli hale geliyor. Donanım ucuzluyor. Birleşik bellek yongaları dizüstü bilgisayarlara giriyor. Performans başına dolar eğrisi dik ve yereli destekliyor.

İki yıl içinde soru "yerel AI çalıştırmalı mıyım?" olmayacak.

"Verilerimi okuması için neden bir başkasına para ödüyordum ki?" olacak.

AMD Ryzen AI Halo, bu geleceği şu anda hissetmenizi sağlayan ilk makine.

Beni takip et. ŞİMDİ.

Tek tıkla kaydet

YouMind ile viral makaleleri AI derin okumayla incele

Kaynağı kaydedin, odaklı sorular sorun, argümanı özetleyin ve viral bir makaleyi tek bir AI çalışma alanında yeniden kullanılabilir notlara dönüştürün.

YouMind'ı keşfet
Üreticiler için

Markdown'ınızı temiz bir 𝕏 makalesine dönüştürün

Kendi uzun yazılarınızı yayımlarken görselleri, tabloları ve kod bloklarını 𝕏 için biçimlendirmek zahmetlidir. YouMind, eksiksiz bir Markdown taslağını temiz ve hemen paylaşılabilir bir 𝕏 makalesine dönüştürür.

Markdown'dan 𝕏'e deneyin

Çözülecek daha fazla kalıp

Son viral makaleler

Daha fazla viral makale keşfet