Veri Arşivi · Ücretsiz

Common Crawl Lookup

Dünyanın en büyük açık web veritabanında web sayfanızın tarama dizinlerini ve varoluş kayıtlarını bulun.

Ne Öğrenebilirsiniz?

Bu alan adının veya sayfa yolunun son Common Crawl dumpında bulunup bulunmadığı.

Bilgisayar modellerinin potansiyel beslenme kaynaklarında sitenizin yeri.

Arşivlenmiş içerik paketlerinin detay tablosuna erişim ve durum incelemeleri.

Geçmiş aylardaki dump verilerinde karşılaştırmalar yapabilme.

Common Crawl nedir?

Terabaytlarca web verisini periyodik olarak açık kaynaklı arxiv eden ve devasa boyutlarda veri sunan küresel bir kuruluştur.

Niçin kullanılır?

Büyük yapay zeka modellerinin (ChatGPT vb.) eğitim setinde web sitenizin yer alıp almadığını kontrol etmenin en pratik yollarından biridir.