Mühendisler Dünyası

Arama motorlarının web dünyası üzerindeki etkisi tartışılmaz olsa da, arama motorlarının index mantığı yüzünden indexlenemeyen, yada indexlenmek istenmeyen bir dünya vardır. Yapılan araştırmalar gösteriyor ki Google, Bing, Yandex, Yahoo tarafından indexlenen sayfa miktarı webdeki sayfaların sadece %5 ’ni oluşturuyor. Yani buzdağının görünen kısmının yarısı… (%5’in neden yarısı olduğu matematiksel bir problem.) İndexlenemeyen bu sayfalar zamanla kontrol edilemez düzeye gelmiş, tüm illegal yapılanmaların meskeni olmuştur. Duyabileceğiniz en pislik şeylerin olduğu bu yapılanmaları, ortamları kontrol etmek amacıyla DARPA tarafından geliştirilen ve günümüze kadar deep web dünyası için yapılmış en güçlü arama motorlarından bir tanesi Memex arama motorudur. Açık kaynaklı olarak, Python programlama dili kullanılarak geliştirilen bu arama motorunun kaynak kodları kullanılarak ve temel alınarak tüm gizli servislerin için bir deep web arama motorunun çatısı oluşturulmuştur. “Memex nedir?” d

Bir ülkede birinci arama motoruysanız, o ülkedeki insanlarla ilgili, o ülkenin gizli servisinden daha çok bilgiye sahipsiniz demektir. Teknolojinin tam anlamıyla hayatımıza girdiği dönemden itibaren, webde dolaşmanın, istediğimiz bilgiye ulaşmanın en hızlı yolu arama motorları kullanmaktır. Girdiğiniz anahtar kelimelere göre sizi en ilgili sayfalara yönlendirmeyi hedef edinen aramam motorlarının arkasında tüm insanların girdiği kelimeleri analiz edecek bir sistem de yatıyor. Sadece arama verileri analiz edilerek o ülkedeki insanların psikolojik durumu, bir şehirdeki insanların psikolojik durumu, yarınki siyasi parti mitingine katılacak kişi sayısı, yaklaşan seçimlerde hangi partinin ne kadar oy alacağı, belirli bir olayın insanlarda hangi etkiler bırakacağı vb. analizler yapılabilir. Burada sıralamadığım ama, aklınıza gelebilecek toplumu ilgilendiren her türlü olayla ilgili analizler arama motorları aracılığıyla yapılabilir. İşte bu yüzdendir ki, eskiden anketlerle yapılan yalan y