Apa Itu Web Crawler?


web crawler


Web crawler adalah bot yang dapat mengindeks segala konten website yang ada di internet, sehingga dapat ditampilkan di halaman hasil mesin pencarian atau Search Engine Result Page (SERP).


Istilah “crawler” sendiri merujuk pada cara kerja bot tersebut yang merangkak di dalam internet untuk mencari dan mempelajari semua konten yang ada di website. Hal inilah yang membuat web crawler sering disebut juga sebagai spider. Bedanya, jika laba-laba merangkak di jaring laba-laba, maka web crawler merangkak pada World Wide Web (WWW).

Komentar

Postingan populer dari blog ini

Scala

IP

Variabel Dan Tipe Data