Bu Becerilere Sahip Claude Code ile Tüm İnterneti Kazıyabilirsiniz

@0xEcho99
ÇINCE1 ay önce · 03 Haz 2026
124K
1.6K
360
62
3.3K

TL;DR

Sosyal medya ve karmaşık web sitelerinden veri çekme işlemlerini otomatize ederken, bot koruma önlemlerini nasıl aşacağınızı ve Agent-reach ile Scrapling gibi açık kaynaklı araçları Claude Code ile nasıl kullanacağınızı öğrenin.

Bu becerilere sahip Claude Code, temelde tüm interneti tarayabilir.

◉ Sosyal Medya Kazıma (Xiaohongshu / X / TikTok / YouTube / WeChat Resmi Hesapları / Reddit)

→ Agent-reach. Xiaohongshu, X, TikTok, YouTube, WeChat ve Reddit gibi platformlar için API erişimini destekleyen açık kaynaklı bir AI iskelet yapısı. CLI araçlarını kurarak ve arama motorlarını yapılandırarak, AI Ajanlarının çeşitli platformlara erişmesine yardımcı olur.

Proje Adresi: github.com/Panniantong/agent-reach

◉ Toplu Veri Kazıma / Bot Karşıtı Önlemleri Aşma

→ Scrapling. Tekil isteklerden tam ölçekli taramaya kadar her şeyi destekleyen, açık kaynaklı, uyarlanabilir bir web kazıma çerçevesi. Dahili statik, JS oluşturma ve bot karşıtı gizli kazıyıcıları sayesinde AI Ajanlarının yüksek hızda yapılandırılmış veri çıkarmasına, Cloudflare'i atlamasına ve web sitesi güncellemelerinden sonra öğeleri otomatik olarak yeniden konumlandırmasına yardımcı olur.

Proje Adresi: github.com/D4Vinci/Scrapling

◉ Oturum Açılmış Sayfaları Kazıma / AI'ın Kendi Kendine Çalışmasını Sağlama

→ Browser-use. AI'ın web sayfalarını bir insan gibi kullanmasını sağlayan açık kaynaklı bir tarayıcı otomasyon çerçevesi. Bir LLM tarafından yönlendirilen (model yapılandırması gerektirir) bu araç, AI Ajanlarının form doldurma, tıklama ve arka uçları kullanma gibi çok adımlı görevleri otonom olarak tamamlamasına yardımcı olurken, Chrome'daki oturum açma durumunuzu da yeniden kullanır.

Proje Adresi: github.com/browser-use/browser-use

◉ İşlemleri İzleme / Karmaşık Kimlik Doğrulama Sayfaları

→ Claude in Chrome. Anthropic'in resmi tarayıcı uzantısı. Claude'u gerçek Chrome tarayıcınıza yerleştirerek, sayfalarda tıklamasını, doldurmasını ve işlem yapmasını izlemenizi sağlar; bu da onu izleme gerektiren veya karmaşık kimlik doğrulaması olan görevler için uygun kılar.

Resmi Web Sitesi: claude.ai/chrome

◉ Tam Otomatik Ağ İletişimi / Günlük Chrome'u Devralma

→ Web-access. Genel aramadan oturum açılmış işlemlere kadar çeşitli senaryoları kapsayan, açık kaynaklı bir Ajan ağ iletişim becerisi. WebSearch / WebFetch / curl / CDP arasında otomatik olarak seçim yaparak ve günlük Chrome'unuzu devralmak için CDP'yi kullanarak (oturum açma durumlarını doğal olarak taşıyarak), AI Ajanlarının çeşitli ağ görevlerini tamamlamasına ve yerel tarayıcı yer imlerini ve geçmişini almasına yardımcı olur.

Proje Adresi: github.com/eze-is/web-access

Temel prensip hafiften ağıra gitmektir: yeterli olduğunda durun ve gerekmiyorsa tarayıcıyı açmayın.

Birkaç gün önce, bir kurs web sitesini kazımak, belgeleri ve videoları arka uçtan çekmek, otomatik olarak çevirip altyazı eklemek ve bunları Obsidian'a kaydetmek için bu kurulumu kullandım - çok sorunsuzdu.

Bu makaleyi Ajanınıza verin ve 'hafiften ağıra, yeterli olduğunda durun ve mümkünse tarayıcıyı açmaktan kaçının' prensibine göre indirip yapılandırmasını sağlayın.

Tek tıkla kaydet

YouMind ile viral makaleleri AI derin okumayla incele

Kaynağı kaydedin, odaklı sorular sorun, argümanı özetleyin ve viral bir makaleyi tek bir AI çalışma alanında yeniden kullanılabilir notlara dönüştürün.

YouMind'ı keşfet
Üreticiler için

Markdown'ınızı temiz bir 𝕏 makalesine dönüştürün

Kendi uzun yazılarınızı yayımlarken görselleri, tabloları ve kod bloklarını 𝕏 için biçimlendirmek zahmetlidir. YouMind, eksiksiz bir Markdown taslağını temiz ve hemen paylaşılabilir bir 𝕏 makalesine dönüştürür.

Markdown'dan 𝕏'e deneyin

Çözülecek daha fazla kalıp

Son viral makaleler

Daha fazla viral makale keşfet