Diskusi Tim Scraper

[oonid]

Isu ini digunakan untuk diskusi seputar aplikasi Scraping (Crawling).
Silakan berkomentar atau bertanya langsung di bawah ini..

[oonid]

buat bahan bacaan, diambil dari diskusi di grup, sekaligus nanti bisa digunakan untuk memutuskan akan menggunakan library/framework apa.
https://www.scrapingbee.com/blog/web-scraping-101-with-python/

[oonid]

Untuk proses pengembangan (development) langsung gunakan direktori yang sesuai, untuk tim scraper di
https://github.com/oonid/telegram-newsletter-bot/tree/main/development/scraper

Jadi kalo mau menambahkan virtual environment atau paket-paket silakan dilakukan di situ.

[oonid]

aku coba bikin satu versi yang pakai lxml:
https://colab.research.google.com/drive/1FMYYFzfHl_gGqDzx4bXPAmYQ9kD84oxT?usp=sharing

silakan diberi masukan... harusnya kalo pakai library lain akan lebih singkat lagi...