Duboki web - Google i Bing
Duboki web dio je interneta čiji sadržaj nije dostupan putem konvencionalnih mrežnih pretraživača.
Podjela sadržaja na internetu (mreži)
S obzirom na dostupnost sadržaja World Wide Web možemo podijeliti na dva dijela: površinski web i duboki web. Površinski web je pojam koji označava sadržaj na Webu koji je lako pretraživ putem konvencionalnih Web pretraživača, kao što su Google, Yahoo! ili Ask.com i sl. Konvencionalni Web pretraživači stvaraju svoje indekse pomoću robota (tzv. pauka) koji pretražuju Web u potrazi za novim informacijama.
S obzirom na trenutak generiranja sadržaja Web stranice možemo podijeliti na statične i dinamične. Sadržaj na statičnim Web stranicama je automatski generiran prilikom otvaranja neke Web stranice. Kod dinamičnih Web stranica, sadržaj se generira prilikom određenog zahtjeva, tj. upita za neki sadržaj. Dinamične Web stranice se danas sve više koriste i one čine veliku većinu onoga što se nalazi na Webu. S obzirom na to da njihov sadržaj nije automatski generiran konvencionalni Web pretraživači ne mogu indeksirat taj sadržaj.
Michael K. Bergman je korištenje konvencionalnih pretraživača usporedio s povlačanjem mreže po površini mora. Premda će se puno toga uhvatiti u toj mreži, puno veća količina informacija je u dubljoj vodi i zbog toga nije uhvaćena. Smatra se da se 99% informacija nalazi u dubokom Web-u, dok je samo 1% informacija dostupno putem konvencionalnih Web pretraživača (površinski Web). Anand Rajaraman je to slikovito opisao izjavom da je ono što nam nude konvencionalni Web pretraživači samo vrh ledene sante.
Naziv
Osim termina duboki Web, koristi se još i termin nevidljivi Web. Termin nevidljivi Web je prvi koristio Jill Ellsworth , misleći na one Web stranice koje nisu indeksirane od strane Web pretraživača.
Michael Bergman je prvi koristio termin duboki Web . On je smatrao da termin nevidljivi Web nije točan, zato što taj sadržaj nije dostupan putem konvencionalnih Web pretraživača, ali je zato dostupan na drugačije načine. Danas se uglavnom koristi termin duboki Web (eng. deep Web).
Kategorizacija
Sadržaj dubokog Web-a bi se mogao svrstati u sljedeće kategorije:
- Online baze podataka: sadržaj se dinamički generira tek kad se postavi određeni upit. Čine najveći dio dubokog Web-a.
- Netekstualni sadržaj kao što su multimedija, slike, softver i sl.
- Sadržaj koji zahtijeva autentikaciju
- Sadržaj koji se neprestano mijenja (portali s vijestima): taj sadržaj se može indeksirati, ali s obzirom na to da se često mijenja potrebna je neprestana ažurnost
- Nepovezane stranice: Web stranice na koje ne vodi ni jedan link, pa roboti do tih stranica nikada ne dolaze
- Sadržaj na društvenim mrežama: razne rasprave, komentari i sl.
- Stranice s ograničenim pristupom: Stranice koje ne dozvoljavaju indeksiranje od strane robota
Primjer stranice iz dubokog weba
Jedna stranica iz prostranstava dubokog weba koja je postala posebno popularna je Silk Road (Put svile), koju je u osnovao korisnik „Dread Pirate Roberts“. Poznata pod nazivom „eBay za droge“, funkcionirala je kao mjesto za kupoprodaju raznih stvari, u glavnini ilegalnih supstanci. Nedugo nakon otvaranja Silk Roada, vrijednost Bitcoina se utrostručila, nakon čega je Senat SAD-a započeo istraživanje njihove međusobne povezanosti. To se direktno odrazilo na konkurentnost Bitcoina, čija je vrijednost pala za 90%. U . FBI je uhitio osnivača Silk Roada i ugasio stranicu, no samo mjesec dana kasnije Silk Road 2.0 je pušten u pogon, a Bitcoin je ponovno utrostručio vrijednost. Vrijednost transakcija preko Silk Roada do njegovog zatvaranja nakon uhićenja osnivača bila je preko milijardu dolara. Ako se jednom odlučite na istraživanje nepreglednih prostranstava tamne strane Interneta, preporuča se temeljito „guglanje“ i oprez. Iako sadrži pravo bogatstvo informacija, deep web krije i pregršt potencijalnih opasnosti.
