Web Crawler adalah sebuah program/script otomatis yang memproses halaman web. Bisa juga disebut sebagai web spider atau web robot. web crawler dapat mencari berapa tingkatan dari web tersebut, seperti rich, peringkat web tersebut , dlll
Alasan saya menggunakan software win web crawler ini, karena lebih mudah di gunakan dari software yg laen. Dan lebih kita mengerti dari software web crawler yg laen