Cara Scraping Data pertanyaan di Quora

Helo sobat omheker kali ini om heker akan menjelaskan Cara Scraping Data pertanyaan di Quora , yuk  kita simak baik baik penjelasan dibawah.

Apakah kamu adalah mitra Quora yang sudah membuat ratusan atau ribuan pertanyaan di Quora?

Apakah kamu tertarik untuk mengumpulkan data dari semua pertanyaan yang pernah kamu ajukan untuk keperluan analisis data? misalnya:
-analisis pergerakan nilai pendapatan,
-tipe pertanyaan yang paling sering dijawab,
-topik yang paling ramai trafik eksternal, dll.

Kita bisa menarik data dari Quora dengan sekali klik, cukup menggunakan browser Chrome dan install google extension tertentu, tanpa harus copas manual satu-satu.

Hasilnya akan tersimpan sebagai file excel seperti contoh di bawah:

*kalau pertanyaanmu ada 1000 maka listnya akan sangat panjang.

—

BERIKUT INI CARA SCRAPING DATANYA. PERHATIKAN INSTRUKSINYA BAIK-BAIK.

1. Install ekstensi datascraper di Google Chrome

Data Scraper - Easy Web Scraping

2. Setelah terinstal, klik icon dataminer di browser chrome dan sign in dengan akun Google.

3. Sekarang, kita akan scrape (tarik data) dari list pertanyaan yang sudah kita ajukan yang ada di halaman mitra. Buka link ini di Chrome https://id.quora.com/partners

*opsional: sort juga pertanyaannya by Pendapatan Sepanjang masa

4. Klik kanan di halaman, pilih inspek. Atau tekan CTRL+SHIFT+I

5. Masukkan script berikut di bagian Console lalu tekan enter

var lastScrollHeight = 0;function autoScroll() {var sh = document.documentElement.scrollHeight;if (sh != lastScrollHeight) {lastScrollHeight = sh;document.documentElement.scrollTop = sh;}}window.setInterval(autoScroll, 100);

6. Script Auto Load / Scroll Paging akan berjalan. Tunggu saja 10 menitan atau lebih sampai seluruh pertanyaanmu muncul dan halaman sudah tidak bisa scroll lagi ke bawah. Lama prosesnya tergantung dari seberapa banyak pertanyaan yang sudah kamu ajukan sebagai mitra di Quora. Makin banyak pertanyaanmu maka semakin lama. Oiya, kotak inspek elemennya boleh ditutup.

7. Jika sudah ter’load semua, klik icon datascrape di kanan atas chrome

8. Klik new recipe

9. Pada tab 1, pilih tipe List Page

10. Pada tab 2, masukkan:

.QuestionListItem.partners_question_list_item

11. Pada tab 3, klik add new column. Lalu buat column dengan settingan berikut:

Name: Pertanyaan
Extract: Text
Selector: .ui_qtext_rendered_qtext

Name: Pendapatan
Extract: Text
Selector: .earnings_amount

Name: Jumlah Jawaban
Extract: Text
Selector: .answer_count

Name: URL Pertanyaan
Extract: URL
Selector: .question_link

12. Tab 4, 5, dan 6 abaikan saja, tidak perlu diisi.

13. Lanjut ke tab 7, beri nama recipe. Misalnya “scrapdata_aldi_mitra”, klik icon Save, lalu klik Run Recipe.

14. Akan tampil jendela baru seperti di bawah contohnya:

15. Klik tombol Download, pilih tipe XLSX (excel). SELESAI.

Silahkan cek file excelnya. Supaya tidak bingung, tiap kali scraping sebaiknya rename dulu filenya dengan menambahkan tanggal scraping.

Jika kamu ingin scrapping data lainnya seperti: Tanggal Pertanyaan, Jumlah Pengikut, Jumlah Tayangan, Jumlah Trafik Internal, Jumlah Trafik Eksternal, dan lainnya, silahkan edit sendiri di bagian Tab 3 Cols, pada setingan Recipe. Bagi yang mengerti soal elemen class pada HTML harusnya bisa melakukannya dengan mudah.

Kamu juga bisa membuat custom recipe lainnya sendiri, misalnya recipe untuk scrapping list pertanyaan yang sudah kamu bookmark dari awal bergabung dengan Quora.

Semoga bermanfaat. Kalau mau request scrapping data tertentu atau butuh bantuan boleh kirim pesan ke saya :)

Share this post