Quiz Web Scrapping

Apa yang dimaksud dengan web scrapping?

• Proses membuat halaman web baru

• Proses mengambil data dari halaman web secara otomatis

• Proses menghapus data dari website

• Proses mengamankan website dari hacker

Answer explanation

Web scraping adalah proses pengambilan sebuah dokumen semi-terstruktur dari internet, umumnya berupa laman web yang dibangun dengan bahasa markup seperti HTML atau XHTML yang bertujuan untuk mengambil data atau informasi dari halaman tersebut baik secara keseluruhan atau sebagian secara otomatis untuk digunakan bagi kepentingan lain.

Tools berikut ini yang paling umum digunakan untuk web scraping dengan Python adalah...

• Flask

• TensorFlow

• BeautifulSoup

• Django

Answer explanation

Phyton juga menggunakan bahasa pemrograman seperti R. Penggunaan phyton untuk scrapping lebih umum dibanding R. Pustaka yang umumnya digunakan untuk scrapping menggunakan phyton adalah BeautifulSoup dan Requests ataupun Scrapy.

Tool web scraping berbasis Python yang sering digunakan dan dikenal mampu menangani scraping skala besar adalah...

• Rvest

• ParseHub

• Imacros

• Import.io

• Scrapy

Answer explanation

Scrapy adalah salah satu pustaka (library) web scraping berbasis Python yang dirancang untuk scraping skala besar. Scrapy memungkinkan scraping data secara cepat dan efisien, serta mendukung crawling otomatis.

Sedangkan rvest adalah package R, ParseHub, imacros serta Import.io adalah tools point-and-click, bukan berbasis pemrograman.

Tool web scraping berikut ini yang menggunakan pendekatan “point and click” dan tidak memerlukan kemampuan pemrograman adalah...

• R dengan package rvest

• BeautifulSoup dengan Python

• Scrapy

• ParseHub

• XPath

Answer explanation

ParseHub adalah contoh tool web scraping berbasis point and click yang tidak memerlukan kemampuan pemrograman. Pengguna cukup mengklik elemen di halaman web untuk mengambil datanya.

Opsi A dan B adalah tools berbasis pemrograman (R dan Python). Opsi C (Scrapy) juga berbasis Python dan lebih kompleks. Opsi E (XPath) adalah metode untuk menargetkan elemen dalam struktur HTML/XML, yang biasanya dipakai dalam kode, bukan point-and-click.

Teknik web srapping yang dilakukan dengan mengirimkan request HTTP kepada website ekstraksi data adalah...

• Parsing DOM

• Parsing HTML

• XPath

• Google Sheets

Answer explanation

eb scrapping menggunakan parsing HTML adalah teknik yang umum digunakan. Parsing HTML merupakan sebuah metode yang dilakukan dengan mengirimkan request HTTP kepada server website yang dijadikan ekstraksi data. Dalam metode ini, web sraper menganalisis struktur HTML dari website yang dituju, kemudian mengekstrak data melalui atribut HTML tersebut.

Teknik Google Sheets dalam web scrapping memiliki kelebihan dan kekurangan, salah satu kekurangannya yaitu...

• Tidak dapat dilakukan pada data terbuka (Public)

• Lebih sulit karena coding rumit

• Dapat terjadi kelambatan atau kegagalan jika website dinamis

• Data tidak langsung tersimpan ke dalam spreadsheet

Answer explanation

Kekurangan teknik google sheets : terbatas pada data yang terbuka (public), dapat terjadi kelambatan bahkan kegagalan jika website yang dituju dinamis/berat.

Yang menjadi langkah awal dalam proses web scrapping adalah...

• Protokol HTTP atau HTTPS

• Sumber data atau URL

• Sumber kode website

• Ekstraksi data

Answer explanation

Langkah pertama : Menentukan sumber data yang akan diambil datanya. Sumber data dapat berupa alamat URL website untuk menjadi sumber data yang sesuai.

Langkah kedua : Membuat koneksi ke website yang dijadikan sumber pengambilan data. Koneksi dapat dibuat menggunakan protokol HTTPS atau HTTP.

Langkah ketiga : Dapatkan sumber kode website yang dijadikan sumber data. Sumber kode yang digunakan bisa dalam format XML, HTML, dll.

Ekstraksi data ada pada langkah kelima.

Teknik web scrapping dengan bahasa query yang digunakan untuk dokumen dokumen dengan struktur HTML atau XML untuk mengakses data secara spesifik adalah...

• Parsing HTML

• Parsing DOM

• Google Sheets

• XPath

Answer explanation

XPath atau XML Path Language adalah bahasa query yang digunakan untuk dokumen dokumen dengan struktur HTML atau XML.

Manfaat dari web scrapping yang tepat adalah....

• Mendapatkan database dan akses data pribadi secara detail dari website

• Mengakses dan memperbarui software

• Mendapatkan database, akses data luas dan detail untuk analisis sentimen

• Mengirim email secara otomatis

Answer explanation

Manfaat web scrapping antara lain :

1. 1. Mendapatkan database

2. 2. Akses data yang luas dan detail

3. 3. Akses data yang aktual

4. 4. Analisis Sentimen

Kelebihan dari Web Srapping adalah sebagai berikut, kecuali...

• Hemat Biaya

• Akurasi Data Tinggi

• Kebijakan Perlindungan Data

• Mudah Diterapkan

Answer explanation

Kelebihan :

1. 1. Cost Effective

• 2. Low Maintenance and Speed

• 3. Data Accuracy

• 4. Easy to Implement

Kelemahan :

1. 1. Data Analysis of Data Retrieved through Scraping the Web

2. 2. Difficult to analyze

3. 3. Protection Policy