بسیاری افراد، “اینترنت” و “وب” را دو مفهوم مترادف در نظر میگیرند، در حالی که این موضوع درست نیست. در واقع، وب، یک جزء از اینترنت است. وب، یک محیط است که از طریق آن اطلاعات قابل دسترسی است. در تصور بسیاری از مردم، وب منحصرا به وبسایتهایی اطلاق میشود که از طریق موتورهای جست و جوی سنتی (همچون گوگل) قابل دسترسی و جست و جو هستند. در حالی که این محتواها (که با عنوان “لایه سطحی” یاد میشود)، بخشی از وب هستند. “وب عمیق در واقع به مجموعهای از محتواهای اینترنتی اشاره دارد که به دلایل فنی بسیار، توسط موتورهای جست و جو، نشانهگذاری و آدرس دار نمیشوند و به همین دلیل است که با کمک این موتورهای جست و جوگر قابل ردیابی نیستند.
در حقیقت، موتورهای جستجوگر تجاری همچون گوگل (Google) و بینگ (Bing)، از الگوریتمهایی برای نمایش دادن نتایج جست و جو استفاده میکنند که بر مبنای پرطرفدار بودن و یا رتبه وبسایتهای مختلف استوار است. با این وجود، این موتورهای جست و جو، تنها حدود 5% از محتوای اینترنت را پویش میکنند.