Ane mau ngebuat program basis desktop atau web jg gk papa asalkan jangan dijalanin di hosting aja. (maaf disini agak acak2kan deskripsinya, untuk lebih jelasnya silahkan dipm atau bid aja, nanti ane kirimin attactment berupa file word, biar lebih readable)
Sesuai judul, program ini ane mau supaya bisa mengecek ribuan keyword sekali run di google search result, ada enggak kata kata yang sama dari domain domain di search result, ingat ya yang dilihat bukan url tapi domainnya saja.
Cara kerjanya (Setelah list keyword di input), diubah dulu settingannya jadi 100 search result per page di google search result, yang dicek cukup 1 halaman pertama aja.
1. Masukan keyword ke google.com , ex : keyword satu
2. Cari di search result domain2 yang ada kata kata keywordsatu (spasinya diabaikan), misalnya
Keywordsatudua.com mejakeywordsatu.com dst.
3. Scrape domain domain itu.
4. Lanjut ke keyword selanjutnya.
Jadi format reportnya itu seperti ini :
Nama keyword jumlah domain tanpa spasi
Keyword Satu 2 keywordsatudua.com keywordsatu
Mejakeywordsatu.com keywordsatu
Jadi ada 4 kolom.
Problem : ane pernah punya program yang ngescrape data dari google search result, cuman bisa ngejalanin 200 atau 2rb keyword per hari, agak lupa. sedangkan program ini ane harapkan bisa menjalankan sampai 10rb keyword sekali jalan atau perhari. Jadi ane minta programnya bisa memiliki minimal sukses rate 70%, jadi diantara 10rb itu harus bisa menscrape data minimal dari 7rb keyword. Kalau kurang dari itu ane anggap gagal. Ane kurang paham kenapa alat nya dulu itu dibatasi, entah dibanned google atau masalah captcha atau yang lainnya, jadi harus bisa mencari solusinya.
Kalau program ini berhasil dibuat ada beberapa pengembangan kedepannya yang berkaitan dengan scrape data dari google, yang tentu saja ada tambahan feenya.
dan diharapkan reportnya ditulis ketika programnya berjalan, jadi tidak menunggu ketika semuanya telah selesai baru di write, untuk menghindari terjadinya closed program secara mendadak, jadi tidak diulang dari awal.