Günümüzde en çok ilgi gören adına kitaplar yazılan Deep web son derece ilginç bir konudur kimi kaynak da inanılmaz abartılmaktadır, insanlara yanlış bilgiler verilmektedir, sahte fotoğraflar gösterilmektedir İnsanlar neye inanacağını bilemez durumda oldu. Bu konu altında olabildiğince somut bilgiler eşliğinde gitmeye özen göstereceğim. İlk olarak kısa bir şekilde Deep web ’den bahsedip ardından olmazsa olmazımız arama motorlarında neden gösterilmediği ile ilgili düşüncelerimi sunacağım izninizle başlıyorum.
“Deep web” kelime anlamlarını incelersek Deep Türkçede derin anlamına gelmektedir Web kelimesi ise Ağ anlamına gelmektedir 2 kelime birleştirildiği zaman derin ağ anlamına gelen kelime bütünlüğünü oluşturur peki nedir bu derin ağ?
Derin ağ arama motorlarının göremediği verileri bulunduran içerisinde birçok site barındıran bir nevi arayarak bulamayacağımız web sayfalarıdır. Şu farkı anlamanıza dikkat çekerim Deep web bir site değildir bir ağdır birden fazla web sayfasının birleşiminden oluşur azalabilir ya da artabilir. Bu arada Deep web denince aklınıza hemen aksiyon gelmesin Deep web başka bir kavram Dark web başka bir kavram Deep web evinizde bulunan resimlerinizin depo edildiği kişisel bir sunucu bile olabilir. Bu durumda Google gelip sizin fotoğrafınızı tabi ki de indexlemez zaten indexlemesi tamamen saçmalık olur. Başka bir örnek daha verelim, Şirket sunucunuz var şirket belgelerinizin başkalarının eline geçilmesini ister misiniz düşünsenize Google’a yazan bulur. Aslında bu tür olayların olmaması için Deep web ile karşı karşıyayız. Biraz önce sizi bir kavramla daha tanıştırmıştım “Dark web” şimdi bu kavramı ve arasındaki farkları inceleyelim Dark web, Deep webden tamamen farklı bir şeydir evet Dark web bir Deep webdir çünkü O da derin ağda bulunur. Fakat kelime anlamını da dikkate alırsak Dark, koyu anlamına gelir yani kelimenin bize demek istediği Derin ağlar üzerinde bulunan en pislik iğrenç işe yaramayan normal bir kullanıcının görmemesi gereken belgeler videolar anlaşmalar veriler ve dokümanlar. Kısa olarak Derin ağların en pislik tarafı diyebiliriz. Böylelikle Deep web kavramını anlamış Dark Web ile farklarını kavramış oldunuz.
Arama Motorlarında Neden Gözükmez?
Kısa tanım yaparken Arama motorlarında indexlenmez ya da görünmez demiştim. Deep webin gözükmemesinin asıl mantığı burada bulunan belgelerin “local” yani kişisel, özel veriler barındırması. Tabi yapay zekâ konusunda insanları aşacak derecede gelişmiş arama motorları da bunu fark etme konusunda üstüne yoktur ve görmezden gelir. Görmezden gelir dedim fakat başka bir düşüncede de göremez denilebilir fakat ben buna inanmıyorum bu kadar gelişmiş bir sistemin göremeyeceği hiçbir şey yoktur. Şuana kadar göremez ya da görmez dedik fakat bu senaryolar neler olabilir?
İçerisinde barındırdığı verilerin birçoğu yüksek boyutludur örneğin: arşivler, Bu arama motorlarının indexlemesini zorlaştırır ve zora girmek yerine indexlemez göz ardı eder.
Sitenin oluşturulduğu alt yapı, script olarak flash olan siteler grafik bir ara yüze ve içeriğe sahip olduğu için, metinsel değer içermez. Oysa ki şuan ki Teknolojiyi baz alarak söylüyorum arama motorları sadece metinsel değer olan web sayfalarını algılayabilir bundan dolayı indexlemeden geçer. Banlara örnek vermek gerekirse ajaxlı siteler (jQuery ile çalışan) güzel bir örnek olur.
Bir başka bir sebepte Erişim sağlamak için şifre isteyen web sayfaları arama motorları nasıl olsa erişemeyeceğini bilir ve durumda atlar.
Web devloper’ların en çok karşılaştığı bir noktada Ftp erişim sayfaları bu sayfaları arama motorları özel alan olduğunu anlar ve yanından bile geçmez.
En önemli noktalardan biride Web sayfalarında bulunan sistem klasörleri ve dosyaları, güvenlik açıkları oluşmaması için sistem ve yönetici klasörleri arama motorları tarafından otomatik olarak dikkate alınmayarak geçer.
Bu konu içerisinde Deep web kavramı ve arama motorları tarafından neden gözükmediği ile ilgili bilgiler verdim olabildiğince somut tanımlar yapmaya çalıştım ..
0 yorum:
Yorum Gönder