Ecommerce-price-scraper: Pustaka Ekstraksi Harga E-Commerce Indonesia Melalui Web Scraping

Abstrak

Penelitian ini berfokus pada pengembangan library Python berbasis BeautifulSoup untuk melakukan web scraping secara otomatis pada platform e-commerce Lazada dan Bukalapak. Tujuan utama penelitian ini adalah untuk memberikan solusi praktis dalam ekstraksi harga produk secara efisien tanpa harus berpindah antar platform. Metodologi yang digunakan melibatkan integrasi BeautifulSoup dan Selenium untuk memastikan akurasi pengambilan data, meskipun struktur HTML situs sering berubah. Sistem yang dikembangkan dapat mengambil informasi seperti nama produk, harga, dan tautan produk berdasarkan kata kunci pencarian pengguna. Hasil pengembangan library menunjukkan bahwa library ini mampu mengotomatisasi proses pengambilan data dengan tingkat akurasi tinggi, sekaligus memberikan peluang untuk pengembangan aplikasi perbandingan harga yang lebih kompleks. Selain itu, kami menyediakan fungsi kepada pengembang untuk dapat diperluas ke lingkungan e-commerce yang lain. Namun, adaptasi terhadap perubahan struktur HTML e-commerce tetap menjadi tantangan yang perlu diperhatikan pada pengembangan selanjutnya. Diharapkan solusi ini dapat meningkatkan efisiensi belanja online bagi pengguna.