Arama motorlarının web dünyası üzerindeki etkisi tartışılmaz olsa da, arama motorlarının index mantığı yüzünden indexlenemeyen, yada indexlenmek istenmeyen bir dünya vardır.
Yapılan araştırmalar gösteriyor ki Google, Bing, Yandex, Yahoo tarafından indexlenen sayfa miktarı webdeki sayfaların sadece %5’ni oluşturuyor. Yani buzdağının görünen kısmının yarısı… (%5’in neden yarısı olduğu matematiksel bir problem.) İndexlenemeyen bu sayfalar zamanla kontrol edilemez düzeye gelmiş, tüm illegal yapılanmaların meskeni olmuştur. Duyabileceğiniz en pislik şeylerin olduğu bu yapılanmaları, ortamları kontrol etmek amacıyla DARPA tarafından geliştirilen ve günümüze kadar deep web dünyası için yapılmış en güçlü arama motorlarından bir tanesi Memex arama motorudur. Açık kaynaklı olarak, Python programlama dili kullanılarak geliştirilen bu arama motorunun kaynak kodları kullanılarak ve temel alınarak tüm gizli servislerin için bir deep web arama motorunun çatısı oluşturulmuştur. “Memex nedir?” diye kısaca açıklayacak olursak bu proje deep web arama motoru yapmak için altyapı ve aynı zamanda deep web arama motorudur diyebiliriz.
Bu proje normal insanların kullanımından daha çok gizli servislerin deep webdeki aktiviteleri ve içerikleri izleyebilmek için oluşturulmuştur. Memex projesinin geliştirme amacı, insanların deep web içeriklerine erişimi değil, deep webdeki illegal yapılanmaları, deep web içeriklerini ve deep web’de yapılan işlemleri izleyebilecek bir sistem oluşturmaktır.
Deep web internet dünyasının erişim bakımından ilk çıktığı seneleri andırsa da, içerik bakımından korkutucu düzeydedir ve içeriği de insanlığın geleceğini tehdit edecek düzeydedir. Türkiye’de meraklı birkaç çocuğun merakı dışında, kullanımı çok az olması belki de bizi sevindiren tek şeydir. Ama ister merak olsun, ister bilerek böyle ortamlardan çocuklarımızı ve kendimizi korumak bizim önceliğimiz olmalı ve herkes bu konuda bilgilendirilmelidir. Memex projesinin temel amacı da bunlardan biridir. Memex projesinin açık kaynak kodlu olması ve geliştirmek için tüm dünya ülkelerindeki gizli servislerin kullanıma sunulması zamanla deep web üzerinde etkisini göstereceğini ve deep web kullanımının azalacağını düşünüyorum. Eğer yazılımcıysanız, programlama biliyorsanız buradan proje kodlarını ve ilgili programları indirerek kendi deep wep arama motorunuzu geliştirebilirsiniz. Son olarak şunu belirtmek istiyorum ki, New York Polis Teşkilatı tarafından Memex projesinin ilk demosu suçluları yakalamak, tespit etmek ve izlemek için kullanılmaya başlandıktan kısa bir süre sonra, bu şehirdeki Deep Wep kaynaklı suçlarda büyük bir azalma oldu.
Yapılan araştırmalar gösteriyor ki Google, Bing, Yandex, Yahoo tarafından indexlenen sayfa miktarı webdeki sayfaların sadece %5’ni oluşturuyor. Yani buzdağının görünen kısmının yarısı… (%5’in neden yarısı olduğu matematiksel bir problem.) İndexlenemeyen bu sayfalar zamanla kontrol edilemez düzeye gelmiş, tüm illegal yapılanmaların meskeni olmuştur. Duyabileceğiniz en pislik şeylerin olduğu bu yapılanmaları, ortamları kontrol etmek amacıyla DARPA tarafından geliştirilen ve günümüze kadar deep web dünyası için yapılmış en güçlü arama motorlarından bir tanesi Memex arama motorudur. Açık kaynaklı olarak, Python programlama dili kullanılarak geliştirilen bu arama motorunun kaynak kodları kullanılarak ve temel alınarak tüm gizli servislerin için bir deep web arama motorunun çatısı oluşturulmuştur. “Memex nedir?” diye kısaca açıklayacak olursak bu proje deep web arama motoru yapmak için altyapı ve aynı zamanda deep web arama motorudur diyebiliriz.
Bu proje normal insanların kullanımından daha çok gizli servislerin deep webdeki aktiviteleri ve içerikleri izleyebilmek için oluşturulmuştur. Memex projesinin geliştirme amacı, insanların deep web içeriklerine erişimi değil, deep webdeki illegal yapılanmaları, deep web içeriklerini ve deep web’de yapılan işlemleri izleyebilecek bir sistem oluşturmaktır.
Deep web internet dünyasının erişim bakımından ilk çıktığı seneleri andırsa da, içerik bakımından korkutucu düzeydedir ve içeriği de insanlığın geleceğini tehdit edecek düzeydedir. Türkiye’de meraklı birkaç çocuğun merakı dışında, kullanımı çok az olması belki de bizi sevindiren tek şeydir. Ama ister merak olsun, ister bilerek böyle ortamlardan çocuklarımızı ve kendimizi korumak bizim önceliğimiz olmalı ve herkes bu konuda bilgilendirilmelidir. Memex projesinin temel amacı da bunlardan biridir. Memex projesinin açık kaynak kodlu olması ve geliştirmek için tüm dünya ülkelerindeki gizli servislerin kullanıma sunulması zamanla deep web üzerinde etkisini göstereceğini ve deep web kullanımının azalacağını düşünüyorum. Eğer yazılımcıysanız, programlama biliyorsanız buradan proje kodlarını ve ilgili programları indirerek kendi deep wep arama motorunuzu geliştirebilirsiniz. Son olarak şunu belirtmek istiyorum ki, New York Polis Teşkilatı tarafından Memex projesinin ilk demosu suçluları yakalamak, tespit etmek ve izlemek için kullanılmaya başlandıktan kısa bir süre sonra, bu şehirdeki Deep Wep kaynaklı suçlarda büyük bir azalma oldu.
Yorumlar
Yorum Gönder