Soal tentang Web Scraping

Apa yang dimaksud dengan web scraping?

• Web scraping adalah proses ekstraksi data dari sebuah website secara otomatis menggunakan program komputer.

• Web scraping adalah proses membeli data dari website

• Web scraping adalah proses menjual website kepada orang lain

• Web scraping adalah proses membuat website dari awal

Apa tujuan utama dari web scraping?

• Menyusun rencana perjalanan

• Menggambar sketsa pemandangan

• Membuat kopi secara otomatis

• Mengumpulkan informasi dari halaman web secara otomatis

Apa yang perlu dipertimbangkan saat melakukan web scraping?

• Waktu tidur

• Jenis makanan

• Warna rambut

• Legalitas, struktur HTML, tools/library, frekuensi permintaan

Apa perbedaan antara web scraping dan web crawling?

• Web crawling and web scraping are the same thing.

• Web crawling is focused on extracting specific data from pages, while web scraping is about navigating websites and downloading pages.

• Web crawling is used for social media, while web scraping is used for search engines.

• Web crawling is about navigating websites and downloading pages, while web scraping is focused on extracting specific data from pages.

Bagaimana cara menghindari pemblokiran saat melakukan web scraping?

• Menggunakan header yang sah, membatasi kecepatan permintaan, dan mengikuti aturan robots.txt dari situs web yang di-scrape.

• Mengabaikan robots.txt

• Mengirimkan permintaan secara bersamaan

• Menggunakan IP palsu

Apa yang dimaksud dengan robots.txt dalam konteks web scraping?

• Dokumen HTML yang digunakan untuk menampilkan hasil web scraping

• File teks yang digunakan oleh situs web untuk mengontrol akses robot mesin telusur web ke bagian-bagian dari situs tersebut.

• File gambar yang digunakan oleh situs web untuk mengontrol akses robot mesin telusur web

• File teks yang digunakan oleh situs web untuk menyembunyikan informasi dari pengguna

Apa yang dimaksud dengan XPath dan bagaimana digunakan dalam web scraping?

• XPath hanya dapat digunakan untuk mengakses data dalam format JSON

• XPath digunakan untuk mengedit gambar dalam web scraping

• XPath adalah bahasa query untuk mengekstrak data dari dokumen XML. Dalam web scraping, XPath digunakan untuk menemukan dan mengekstrak informasi dari halaman web berdasarkan struktur HTML.

• XPath adalah bahasa pemrograman untuk membuat website

Apa peran BeautifulSoup dalam web scraping?

• BeautifulSoup berfungsi sebagai browser web

• BeautifulSoup membantu dalam melakukan parsing dokumen HTML dan XML saat melakukan web scraping.

• BeautifulSoup digunakan untuk mengelola database

• BeautifulSoup membantu dalam melakukan rendering halaman web

Bagaimana cara menyimpan data yang telah di-scrape dari website?

• Mencetak data dalam format PDF

• Mengirim data ke email

• Menyimpan data dalam format XML

• Menyimpan data yang telah di-scrape dari website dalam format JSON.

Apa saja bahasa pemrograman yang sering digunakan untuk web scraping?

• C++

• Python, JavaScript

• Ruby

• Java