Ana içeriğe atla

Kayıtlar

Açık Kaynaklı etiketine sahip yayınlar gösteriliyor

Memex - DARPA Deep Web Arama Motoru

Arama motorlarının web dünyası üzerindeki etkisi tartışılmaz olsa da, arama motorlarının index mantığı yüzünden indexlenemeyen, yada indexlenmek istenmeyen bir dünya vardır. Yapılan araştırmalar gösteriyor ki Google, Bing, Yandex, Yahoo tarafından indexlenen sayfa miktarı webdeki sayfaların sadece %5 ’ni oluşturuyor. Yani buzdağının görünen kısmının yarısı… (%5’in neden yarısı olduğu matematiksel bir problem.) İndexlenemeyen bu sayfalar zamanla kontrol edilemez düzeye gelmiş, tüm illegal yapılanmaların meskeni olmuştur. Duyabileceğiniz en pislik şeylerin olduğu bu yapılanmaları, ortamları kontrol etmek amacıyla DARPA tarafından geliştirilen ve günümüze kadar deep web dünyası için yapılmış en güçlü arama motorlarından bir tanesi Memex arama motorudur. Açık kaynaklı olarak, Python programlama dili kullanılarak geliştirilen bu arama motorunun kaynak kodları kullanılarak ve temel alınarak tüm gizli servislerin için bir deep web arama motorunun çatısı oluşturulmuştur. “Memex nedir?” d