Co to jest Spider

Co to znaczy Spider: Odmiennie robot albo crawler. To jest program używany poprzez wyszukiwarki do przeszukiwania Internetu w celu znalezienia i zaindeksowania dokumentów. Roboty te poszukują nowych stron jak także odwiedzają już zaindeksowane by zaktualizować bazę danych swojej wyszukiwarki