Web Crawler

PENGERTIAN

      Web Crawler atau yang sering kita kenal dengan sebutan Web Spider atau Web Robot merupakan suatu aplikasi dimana kita dapat membandingkan beberapa web yang terdapat di internet Web Crawler berkerja secara otomatis dengan membandingkan beberapa alamat website yang sering dikunjungi dan akan secara otomatis menyimpan semua bagian file yang terdapat didalamnya dalam folder komputer kita.

Nah saya akan mereview mengenai web crawler yang akan saya gunakan yaitu :

http://win-web-crawler.soft32.com/free-download?rel=center

selanjutnya setelah kita mendapatkan software web crawler tersebut kita harus menginstalnya terlebih dahulu:

Setelah itu kita dapat menggunakan web creawler tersebut untuk penganalisaan data pada web clawler  dan kita bisa memvalidasi kode HTML dan kita juga bisa  mengumpulkan alamat e-mail website yang kita analisa.

web crawling atau spidering adalah proses mengunjungi setiap dokumen pada web clawler.

Saya menggunakan software ini karena software ini mudah di temukan dan software ini juga sangat mudah digunakan untuk menganalisa WebSite yang akan akan kita analisa.

·         Kelebihannya :

1.    Mengetahui detail lebih banyak tentang web yang kita inginkan

2.    Ukuran filenya kecil

3.    Mudah di gunakan

4.    Proses penganalisaan cepat

·         Kekurangannya :

1.    Hanya 15 hari ( trial )

Nah saya akan mengajak kalian untuk mengetahui cara kerja win web creawler yang telah saya install tadi.

Misalnya kita akan mengecek situs website makanan cepat saji DOMINO PIZZA.

Pertama-tama kita harus memilih command button New yang terdapat di pojok kiri halaman awal web clawler.

Setelah itu akan muncul tampilan halaman sebagai berikut:

Pada gambar source yang terpilih adalah

 


sedangkan seharusnya source yang kita gunakan adalah

disini kita memilih source WebSite / Dirs  karena kita akan menganalisan berdasarkan WebSite.

Oke, Website resmi restoran cepat saji solaria sudah dapat kita masukkan karena setelah kita memilih source WebSite / Dirs tampilan menjadi:

Ketikan Website resmi DOMINO PIZZA pada kolom Starting Address 

Tidak lupa juga kita harus menceklis semua Save Data in Folder dan memilih Save Data in csv Format (“url”,”title”) seperti berikut :

Dan kemudianpilih OK untuk memulai menganalisa website yang telah kita masukkan tadi.

Kita harus menunggu beberapa saat hingga web crawler yang sedang bekerja selesai / finished, dan ketika setesai tampilan akan menjadi seperti ini :

Secara otomatis isi file dari halaman website yang telah diproses akan masuk kedalam sebuah folder Download didalam tempat penyimpanan data software web crowler.

isi dari folder tersebut data mengenai website yang telah dianalisa.

Dalam Folder dominos.com terdapat URL dan MetaTag

dari hasil analisa tadi. dan dalam URL tersebut berisikan seluruh URL yang dimiliki domino pizza seperti berikut ini:

Referensi: 

• http://www.google.co.id/url?sa=t&rct=j&q=pengertian%20web%20crawler&source=web&cd=3&sqi=2&ved=0CC0QFjAC&url=http%3A%2F%2Fwww.unisbank.ac.id%2Fojs%2Findex.php%2Ffti1%2Farticle%2Fdownload%2F97%2F92&ei=48h1T9DUFsL5rAfspf2aDQ&usg=AFQjCNET4eraTFdCpnnrPxYCtTb4GMOobQ&cad=rja

pengaruh web-internet dalam kehidupan dan tradisi

hey-hoy ....

kembali lagi diblog tugas saya Nur Apriyanti dengan tugas-tugas baru dan tentunya dengan dosen baru yaitu bapak Reza Candra muda-mudahan dapat memberikan ilmu yang banyak serta nilainya yang bagus.

Yak, ini tugas pertama saya:

•   Mengapa Web mempengaruhi kehidupan dan tradisi kita? Apa efek positif dan negatifnya?

Sebelumnya mari kita bahas mengenai web atau situs web atau internet sebagai penyambung user dengan web.

Web, web itu apasih?

        Web adalah kumpulan  dari halaman-halaman yang digunakan untuk menampilkan informasi. Informasi tersebut dapat berupa gambar, gambar gerak-gerak, suara, dan bahkan mungkin gabungan dari semua itu baik yang bersifat statis maupun dinamis yang membentuk satu rangkaian tampilan yang saling terkait dimana masing-masing dihubungkan dengan link-link.

Nah setelah itu apa yang dapat menyambungkan kita sebagai pengguna kepada web web yang tersedia.

Ahaaaay jawabannya “Internet”,

dan ini artinya internet merupakan penghubung antara pengguna computer untuk berkomunikasi atau mencari informasi dari mulai yang statis hingga yang dinamis dari suatu negara ke negara lain di seluruh dunia.

Membahas internet atau web sangat menarik karena fungsinya yang sangat banyak untuk pengguna dari kalangan remaja hingga pekerja atau orang dewasa sekalipun.

Beberapa fungsi internet – web secara umum:

1.    Internet – web dapat menjadi sarana komunikasi.

2.    Internet – web sebagai sarana pertukaran informasi atau data.

3.    Internet – web memberikan hiburan seperti games.

4.    Internet – web sebagai tempat menambah ilmu pengetahuan.

5.    Internet – web sebagai tempat jual beli online.

Namun Internet – web memiliki banyak dampak negative, yaitu:

1.    Ponografi, kenapa pornografi? Yak ini karena Internet – web merupakan hal yang mendunia bisa dimiliki dan diakses siapa saja. Termasuk pada pengupload-an video porn diluar negeri yang biasa-biasa saja namun menjadi larangan diIndonesia.

2.    Penipuan, karena Internet – web salah satu sarana jual beli online maka banyak oknum-oknum yang melakukan penipuan.

3.    Pembodohan, Internet – web menyediakan berbagai macam games online yang dapat membuat user yang masih berstatus pelajar keasikan mengaksenya dan lupa akan kewajibannya.

Dampak negative seperti ini dapat merusak kehidupan dan tradisi budaya kita,  hal ini jelas karena telah kita bahas bahwa pornografi yang tersebar merupakan dari budaya luar atau budaya barat bukan budaya timur seperti orang Indonesia. namun beberapa dari kita menganggap bahwa pornografi bukan suatu hal yang asing lagi karena terbiasanya mereka mengakses Internet – web yang menyediakan pornografi tersebut sehingga terlihat bahwa budaya timur kita telah berubah menyerupai budaya barat yang semestinya tidak ditiru.

Hiaaaaks ------- itulah jawaban dari saya, semoga dapat menjawab pertanyaan dari tugas pertama saya J

terimakasih…