Nevidljivi web je skriveno područje interneta koje tražilice ne pretražuju automatski. To su informacije koje su slobodno dostupne na Internetu, ali koje se neće dohvatiti uobičajenim zahtjevima za pretraživanje. Za pronalaženje informacija koje su skrivene na nevidljivom webu potrebno je malo više truda.
Vidljivi web su informacije koje možete vidjeti ili dohvatiti iz tražilica. Nevidljiva mreža se ponekad naziva i duboka mreža. Ako o Internetu razmišljate kao o ogromnoj bazi podataka, neke je informacije u bazi podataka lakše pronaći od drugih. Informacije koje se nalaze na vidljivom webu samo su djelić informacija dostupnih na Internetu.
Baze podataka internetskih tražilica već sadrže ogromne količine informacija. Kada upišete pitanje u tražilicu, ona će prikazati popis mogućih stranica koje bi mogle odgovoriti na vaše pitanje. Jeftinije je za tražilicu prikazati ove stranice s odgovorima nego pohraniti svaku moguću stranicu na temu koju tražite. Također zauzima manje prostora u bazi podataka tražilice.
Pomislite na milijune ljudi koji svakodnevno koriste internet. Postavljaju pitanja tražilicama, traže teme ili samo surfaju po mreži. Lakše je bazi podataka dati stranicu s odgovorima nego izravno pristupiti web stranicama.
Način pristupa materijalu na nevidljivom webu je jednostavno stavljanje riječi baza podataka iza upita za pretraživanje. Ako tražite praznike u Irskoj, upotrijebite riječi praznici u bazi podataka Irske. Ovo će usmjeriti tražilicu da provjeri pretražive baze podataka o vašoj temi. Mnoge baze podataka koje pohranjuju informacije imaju riječ baza podataka na svojim web stranicama, što ih čini lakšim za pronalaženje.
Postoje neke web stranice koje su na nevidljivom webu isključivo iz tehničkih razloga. Baze podataka se stvaraju pomoću paukova. To su računalni programi koji pretražuju po webu tražeći informacije. Međutim, pauci ne mogu razmišljati niti tipkati. Mogu skakati s veze na vezu, ali ne mogu razmišljati svojom glavom.
Ako pauk naiđe na web stranicu kojoj je potreban pristup lozinki, nema načina da uđe na tu stranicu. Postoje mnoge stranice koje zahtijevaju od korisnika da se prijavi i koristi lozinku za ulazak i pregled njihovog sadržaja. Također, ako je web stranica stvorena bez uobičajenog HTML-a, koji je osnovni web jezik, onda se možda neće uvijek lako čitati. Na primjer, PDF dokumentu se može pristupiti samo kao poveznica, a ne može se lako pronaći kao HTML web stranica.
Još jedna poveznica na koju pauci neće ići je bilo koja veza koja ima upitnik. Pauci su obaviješteni da ne idu na veze s upitnikom, jer bi to mogle biti zamke postavljene da zarobe pauke. Veza također može sadržavati loše napisanu skriptu i stoga se možda neće pohraniti u uobičajene baze podataka. Ove veze bit će dostupne samo kada pretražujete baze podataka na nevidljivom webu.
Tražilice se ažuriraju sofisticiranim tehnikama pretraživanja za pristup nevidljivom webu. Smatra se da će s vremenom nevidljiva mreža postati lakše vidljiva. Do tada, radi se o korištenju snage mozga za ispitivanje tražilica i surfanje vezama za pronalaženje informacija.