Dalam tugas web crawler ini saya menggunakan software win
web crawler http://win-web-crawler.soft32.com/free-download?rel=center
. Apa itu win web crawler? Win web crawler adalah spider mesin pencari
teratas untuk situs web langsung dan mendapatkan data dari mereka. Win Web
Crawler akan mengambil halaman html atau
teks dari situs web sesuai dengan yang anda tentukan dan ekstrak semua data
yang ditemukan dalam halaman tersebut.
Syarat untuk menggunakan system ini sebagai berikut :
· Jendela 95/98/2000/NT/ME/XP/Vista
· 32 MB RAM 32 MB RAM
· 1 MB Hard Disk Space 1 MB Ruang Hard Disk
· Internet Connection Koneksi Internet
Ciri-ciri software :
Kecepatan tinggi , multi-threaded, ekstraksi akurat (langsung
menyimpan data ke file disk). Program memiliki berbagai filter untuk membatasi
sesi, seperti – filter url , tesk filter , data filter , domain filter ,
tanggal dimodifikasi , dan lain-lain. Hal ini memungkinkan tingkat rekursi dapat dipilih
oleh pengguna , benang pengambilan timeout , dukungan proxy dan banyak pilihan
lain. Harus memiliki alat untuk webmaster yang membangun direktori.
Inilah gambar software nya :
- Kemudian untuk memulai menggunakan softwarenya kita memilih command button new yang ada di pojok kiri atas . kemudian setelah itu akan muncul tampilan halaman seperti di pojok kiri ini :
- selanjutnya kita pilih cummond button
- Disini saya memilih menggunakan web makanan cepat saji, contohnya saya menggunakan web KFC . Link tersebut kemudian kita masukan di
- kemudian setelah itu kita berikan ceklis pada .
- Setelah semua di ceklis kita tekan ok , data pun akan segeran diproses.setelah ada tulisan finished berarti data sudah selesai dip roses , gambarnya seperti ini :
Data yang kita proses
secara otomatis berada di dalam folder tempat penyimpanan data software web
crawler. Semua berisi mengenai data website yang telah di analisa (makanan
cepat saji ).
Mengapa saya memakai software ini? sebenarnya saya coba-coba
untuk cari software web crawler kemudian saya menemukan win web crawler dan
saya mendownloadnya. Setelah di download saya mencoba menjalankan softwarenya,
untuk menjalankan software ini tidak sulit. Tetapi untuk menjalankan software
ini kita harus menggunakan internet.