Web rudarenje je oblik prikupljanja informacija koji se odnosi na podatke prikupljene iz online izvora. Prikupljanje podataka iz izvora diljem Interneta korisnicima omogućuje prikupljanje velikih količina informacija za analizu kako bi donijeli ključne poslovne odluke u online okruženju. Na primjer, istraživač može koristiti web rudarenje za prikupljanje informacija o korištenju određenih ključnih riječi u web sadržaju. Alternativno, trgovci na malo i drugi marketinški stručnjaci koriste internetsko rudarenje podataka kako bi uočili trendove u prometu na webu, pretvorbu posjetitelja stranice u kupce i drugu upotrebu weba.
U smislu prikupljanja, sortiranja i analize podataka, web rudarenje oponaša tradicionalne aktivnosti rudarenja podataka. Usporedno, aktivnosti web rudarenja usredotočuju se na informacije temeljene na webu, a ne na veliki presjek izvora informacija kao što su izvanmrežne računalne baze podataka, evidencija kupaca ili tiskani računovodstveni podaci, kao što se obično događa s tradicionalnim rudarenjem podataka. Fokusiranje isključivo na prikupljanje podataka iz online izvora pruža ciljanu analizu potrebnu za strategije internetskog marketinga, odluke o strukturi web stranice i slično donošenje odluka vezanih uz elektroničku trgovinu. Prikupljanje podataka putem web rudarenja također pruža dodatnu prednost širokoj međunarodnoj demografskoj skupini, budući da su web stranice iz cijelog svijeta dostupne istraživačima i sakupljačima informacija.
Profesionalno, web rudarenje je podijeljeno u tri posebne kategorije: rudarenje web strukture, rudarenje korištenja i rudarenje web sadržaja. Svako se područje usredotočuje na specifične informacije kao što su struktura i hiperveze određene web stranice, informacije zapisnika poslužitelja o korištenju posjetitelja i određeni sadržaj dostupan na mreži. Softverski paketi i usluge za analizu web stranica izvrstan su primjer rudarenja korištenja weba, pružajući webmasterima informacije o prometu posjetitelja, korištenim rezultatima pretraživanja, kliknutim poveznicama i vremenu provedenom u interakciji s određenim stranicama. S druge strane, rudarenje strukture pruža detaljne informacije o internoj strukturi određene web stranice, uključujući hiperveze, baze podataka i funkcije upita.
Za marketinške stručnjake, web rudarenje nudi obilje korištenja u odnosu na marketinške aktivnosti. Znati kako posjetitelji web-mjesta koriste određenu web-lokaciju, kako su konkurenti postavili konkurentsku stranicu i koji je sadržaj već na mreži je vrijedna informacija. Takve informacije pomažu ključnim donositeljima odluka u izradi marketinške strategije temeljene na prethodno dokazanim tehnikama i dokumentiranim informacijama.
Fakulteti i sveučilišta također koriste web rudarenje putem softvera koji potvrđuje da su studentski radovi jedinstveni i da nisu plagirani. Koristeći načela rudarenja web sadržaja, takvi pomoćnici za ocjenjivanje pretražuju cijeli internet u potrazi za sličnim sadržajem. Instruktori učitavaju tekst studentskog dokumenta, a zatim upućuju softver za plagijat da provjeri na Internetu ima li sličnih fraza ili kopiranog teksta na internetu. Rezultati se često izražavaju kao postotak podudarnog teksta. Dane su veze na sve slične rezultate kako bi se instruktorima omogućila mogućnost posjete web-mjesta kako bi utvrdili jesu li utakmice doista plagirane.