Tüm Ürünler
Web Scraping
Robots.txt Analiz v1.0
robots.txt analiz, test, uret, karsilastir. 15 bot tanima (GPTBot/ClaudeBot dahil), 7 preset.
Features
- 15 bot (Googlebot/Bingbot/GPTBot/ClaudeBot/Bytespider)
- URL crawlable testi (bot bazli)
- Form ile sifirdan uretici
- 7 preset (WordPress/Shopify/Next.js/Magento/Stage/AI-block)
- Wildcard (*) ve end-anchor ($) destegi
- Syntax hata tespiti (12+ kategori)
- 2-5 site yan yana karsilastirma
- AI bot erisim tablosu
- Case-sensitivity kontrolu
- Internet GEREKLI (site cekme)
Gereksinimler
Python 3.10+, pip (paket yöneticisi), İnternet bağlantısı
Kurulum Rehberi
- ZIP dosyasını indirip istediğiniz klasöre çıkarın
- Klasör içindeki
KURULUM.bat (Windows) veya kurulum.sh (Mac/Linux) dosyasını çalıştırın - Gerekli kütüphaneler otomatik yüklenecektir
BASLAT.bat or baslat.sh ile programı başlatın- Tarayıcınızda
http://localhost:5000 adresine gidin
Değerlendirmeler
Henüz değerlendirme yapılmamış. İlk değerlendirmeyi siz yazın!