Saya ingin membuat sebuah dashboard price monitoring sebuah marketplace dimana input berupa table database yg berisi :
1. SKU Barang
2. Nama Barang
3. Harga Modal
4. Harga Reseller
5. Harga Jual
6. Link halaman yg tinggal di scrape (tidak perlu simulasi klik2, krn link ini sudah fix tinggal di scrap saja)
Hasil Scap akan disimpan ke dalam sebuah table di databse Output berupa halaman web yg berisi :
1. SKU Barang
2. Nama Barang
3. Harga Modal
4. Harga Reseller
5. Harga Jual
6. Link halaman yang di scrape
7. Nama Barang (Hasil Scrape)
8. Harga Barang (Hasil Scrape)
9. Selisih Harga Scrape cs Harga jual (Point 5) - tinggal hasil perhitungan saja
10. Nama Seller (Hasil Scrape)
11. Link Produk Seller (Hasil Scrape)
12. Disiapkan sebuah tombol yg digunakan untuk HIT URL HTTP yg akan diberikan nanti dgn menggunakan parameter salah satu dari poin 1-7 diatas
13. Tanggal Scrap dilakukan
Ketentuan :
Database : menggunakan MySQL
Scrapping Framework : Scrapy atau sejenisnya
Scheduler : Scarapping dijalankan secara backend menggunakan scheduler dan disimpan ke DB, UI hanya tinggal menampilkan dari DB
UI : PHP Based
Support export ke excel file
Keterangan
Jumlah barang yang perlu discrap 3000-4000 per hari
Tampilan tidak perlu bagus yang penting fungsi bisa berjalan sesuai yang diinginkan
Jika ada yang perlu ditanyakan bisa melalui diskusi pada project ini