Data

Cara Crawl Data Twitter Thread atau Komentar

Published at Tuesday, 29 August 2023

Aku punya kabar baik untuk para peneliti data, analis sosial, atau bahkan para pengguna Twitter yang ingin menggali lebih dalam tentang topik atau peristiwa tertentu yang sedang viral di platform ini. Aku akan berbagi cara menarik untuk melakukan crawl data Twitter pada bagian thread atau komentar dari suatu tweet.

Sebagai langkah awal, kita akan menggunakan tweet-harvest versi terbaru. Apa itu tweet-harvest? Ini adalah sebuah alat yang sangat berguna untuk mengekstraksi data dari Twitter. Dengan menggunakan tweet-harvest, kita bisa mendapatkan informasi yang lebih rinci tentang suatu topik yang sedang dibahas dalam bentuk thread atau komentar pada suatu tweet.

Dalam tweet-harvest versi terbaru, ada satu parameter baru yang perlu diperhatikan yaitu --thread. Parameter ini harus diisi dengan URL dari thread yang kita ingin crawl, sehingga kita bisa mendapatkan semua komentar dari tweet tersebut.

Untuk memudahkan penggunaan tweet-harvest, aku telah membuat sebuah Google Colaboratory Notebook yang bisa kalian akses secara gratis. Dengan mengakses link tersebut, kamu dapat menggunakan tweet-harvest dengan fitur lengkap tanpa harus menginstal alat ini secara manual. Akses google colab nya disini: https://colab.research.google.com/drive/1qvSLNz0gRcFZVz7RwgLimm0QpRXdj8VT

Namun, aku ingin mengingatkan kalian untuk menggunakan tweet-harvest ini hanya untuk keperluan edukasi, riset, atau belajar. Jangan mencoba untuk menggunakan alat ini untuk keperluan komersial atau bahkan disalahgunakan. Kita harus tetap menghormati privasi dan keamanan pengguna Twitter.

Dengan menggunakan tweet-harvest pada bagian thread atau komentar tweet, kamu bisa mendapatkan informasi yang lebih lengkap dan mendalam tentang topik atau peristiwa yang sedang viral di Twitter. Ini sangat berguna bagi para peneliti data atau analis sosial yang ingin menggali lebih dalam tentang apa yang dikatakan oleh pengguna Twitter dalam konteks tertentu.

Misalnya, kamu tertarik untuk meneliti tentang pandemi COVID-19 dalam konteks opini pengguna Twitter. Dengan menggunakan tweet-harvest pada bagian thread atau komentar tweet, kamu bisa mendapatkan berbagai pendapat, pertanyaan, atau