وب پنهان، وب عمیق یا دیپ وب (به انگلیسی: Deep web) بخشهایی از شبکه وب جهانگستر هستند که محتویات آن به هر دلیلی توسط موتورهای جستجوی استاندارد نشانداده نمیشوند. واژهٔ متضاد دیپ وب، سرفیس وب (وب سطحی) است. دیپ وب شامل کابردهای بسیار رایجی همانند وبنامه و بانکداری آنلاین است. اولین تلفیق اصطلاح دیپ وب و دارک وب در حدود سال ۲۰۰۹ پدید آمد در زمانی که در کنار فعالیتهای غیرمجاز در شبکه آزاد دارکنت در حال وقوع بود. برخی از مشهورترین وبسایتهای وب پنهانسیلک رود یا آلفابی هستند.
اندازه:
در سال ۲۰۰۰، مایکل کی. برگمن گفت چگونه سرچ کردن در اینترنت را میتوان با کشیدن یک شبکه در میان سطح یک اقیانوس مقایسه کرد: ممکن است که یک معامله خوبی در شبکه بدست بیاید، اما ثروتی از اطلاعات وجود دارد که عمیق و در نتیجه از دست رفتهاست. بسیاری از اطلاعات وب بسیار پایین در سایتها دفن شدهاند، و موتورهای جست و جوی استاندارد آنها را پیدا نمیکنند. موتورهای جستجوی سنتی محتوای در دیپ وب را نمیتوانند ببینند یا بازیابی کنند. بخشی از وب که توسط موتورهای جستجوی لیست شده به عنوان سرفیس وب (وب سطحی) شناخته میشود. در سال ۲۰۰۱، دیپ وب چندین برابر بزرگتر از سرفیس وب بود. یک مقایسه از کوه یخ توسط دنیس شستاکوف به ترتیب نشان دهندهٔ تفاوت بین سرفیس وب و دیپ وب است:
اندازه گرفتن یا تخمین زدن اندازه و عمق دیپ وب کاری غیرممکن است. زیرا اکثر پایگاه های داده، دارای اطلاعات قفل شده و رمزگذاری شده هستند. تخمینهای اولیه نشان میدهد دیپ وب ۴۰۰ تا ۵۵۰ بار برگتر از سرفیس وب است. با این حال از آنجاکه همیشه اطلاعات و سایتهای بیشتری در حال اضافه شدن است میتوان فرض کرد که دیپ وب در حال رشد نمایی در نرخی است که نمیتوان مقدار دهی کرد.
براوردهای مبتنی بر تعمیم دهی از یک مطالعه انجام شده در دانشگاه کالیفرنیا برکلی در سال ۲۰۰۱ اندیشید که دیپ وب حدوداً شامل ۷٫۵ پتابایت میشود. تخمینهای دقیق تری نیز برای تعداد منابع رد دیپ وب وجود دارد: تحقیقات او و همکارانش. حدود ۳۰۰۰۰۰ دیپ وب سایت درسال ۲۰۰۴ در کل وب شناسایی شده، و با توجه به شستاکوف، حدود ۱۴۰۰۰ دیپ وب سایت در بخش روسی وب در سال ۲۰۰۶ وجود دارد.
پیدایش اصطلاح دیپ وب:
برگمن در یک مقاله در دیپ وب، یک مجله الکترونیکی انتشاراتی، ذکر کرد که جیل السورث از اصطلاح وب پنهان در سال ۱۹۹۴ استفاده کرد که به وب سایتهایی که توسط هیچ موتور جستجویی ثبت نام نشده بودند اشاره میکرد. برگمن به مقالهای که توسط فرانک گارسیا در ژانویه سال ۱۹۹۶ نوشته شده بود اشاره کرد:
«ممکن است یک سایت به دلایل منطقی ای طراحی شده باشد، ولی آنها زحمت ثبت نام کردن آن در هیچیک از موتورهای جستجو را به خود ندادند؛ بنابراین، هیچکس نمیتواند آنها را پیدا کند! شما پنهان هستید. من آنها را وب مخفی مینامم.»
یکی دیگر از استفادههای اولیه از اصطلاح وب مخفی توسط بروس مونت و متئو بی. کل از کتابخانه نرمافزار شخصی، در یک توصیف از اولین ابزار شناخته شده دیپ وب در یک مصاحبه مطبوعاتی در دسامبر سال ۱۹۹۶ بود.
اولین استفاده از اصطلاح خاص دیپ وب، که در حال حاضر بهطور کلی پذیرفته شده، در مطالعه مذکور برگمن رخ دادهاست.
انواع محتوا:
روشهایی که از لیست شدن صفحات وب توسط مرورگرهای سنتی جلوگیری میکند ممکن است به عنوان یک یا ببیشتر از موارد زیر طبقهبندی شود:
برچسب : نویسنده : 2preferablea بازدید : 139