Hvad er den dybe web?
Den dybe web er den del af internettet, der ligger uden for standardsøgningsmetoder.En standard søgemaskine finder websider ved at bringe en enkelt side op og klikke på alle linkene.Dette giver dem mulighed for at strække sig ud fra en enkelt side som en kæmpe edderkopweb, finde side efter side gennem link.Denne proces fanger kun en brøkdel af de sider, der findes på internettet;Kæmpe mængder data er helt uklassificeret af en af mange grunde.Disse sider vil aldrig komme op i en standard søgemaskine og er derfor usynlige for de fleste webbrugere.
Surface Web er den del af det internet, som de fleste brugere er kendte med.Denne del indeholder de standard websider og webtjenester, som de fleste brugere kender til.Den dybe web består af information om, at kun specifikke dele af internetbrugere er opmærksomme på eller også har adgang.Den dybe web er enorm sammenlignet med overfladewebet;I år 2000 var det næsten 50 gange større end Surface Web.
Årsagen til, at den dybe web findes, skyldes hovedsageligt begrænsninger på søgemaskiner.Når søgemaskiner kigger gennem links, er de ikke i stand til at få adgang til visse typer websider.Disse sider kommer aldrig ind i systemet og indekseres derfor aldrig.Når en bruger søger efter en af disse sider, vil han eller hun aldrig finde det, da søgemaskinen ikke registrerer sin eksistens eller dens manglende adgang til den.
Der er en række forskellige sidetyper, der er vanskelige eller umulige for ensøgemaskine til indeks.Dynamiske og databasebaserede websider er praktisk talt umulige, da de kræver specifik input til at eksistere.Disse websider er sammensat på stedet, ofte gennem brugerinput.Da der ikke findes en dynamisk side, før den er nødvendig, springer søgemaskinerne på dem, fordi de ikke ved, hvad de skal bede om. Private eller lukkede websider udgør en anden stor del af den dybe web.Da disse sider kræver legitimationsoplysninger eller loginoplysninger, og søgemaskinen hverken har, er den blokeret for at få adgang til oplysninger på den anden side af login.Selv med dette problem er nogle loginbaserede steder en del af overfladewebet.Hjemmesiden opretter særlige bestemmelser for at give motorer mulighed for at søge på sine sider.Dette er almindeligt blandt sider, der har åben registrering og ønsker at generere yderligere trafik. En anden stor del af det dybe web er lavet af unlinkede eller begrænsede websteder.Disse sider har ikke nogen links til ressourcer uden for ressourcer eller blokerer aktivt eksisterende links.Dette forhindrer, at søgemaskinerne nogensinde snubler over siden, så det føjes aldrig til nogen lister.Dette plejede at være almindeligt blandt personlige websider, men ændringer i moderne webbrug har gjort de fleste personlige sider forbundet og indekseret.