Scrape data dari google

 

Ane mau ngebuat program basis desktop atau web jg gk papa asalkan jangan dijalanin di hosting aja. (maaf disini agak acak2kan deskripsinya, untuk lebih jelasnya silahkan dipm atau bid aja, nanti ane kirimin attactment berupa file word, biar lebih readable)

Sesuai judul, program ini ane mau supaya bisa mengecek ribuan keyword sekali run di google search result, ada enggak kata kata yang sama dari domain domain di search result, ingat ya yang dilihat bukan url tapi domainnya saja.

Cara kerjanya (Setelah list keyword di input), diubah dulu settingannya jadi 100 search result per page di google search result, yang dicek cukup 1 halaman pertama aja.

1.       Masukan keyword ke google.com , ex : keyword  satu

2.       Cari di search result domain2 yang ada kata kata keywordsatu (spasinya diabaikan), misalnya

Keywordsatudua.com mejakeywordsatu.com dst.

3.       Scrape domain domain itu.

4.       Lanjut ke keyword selanjutnya.

 

Jadi format reportnya itu seperti ini :

Nama keyword                 jumlah                  domain                                                 tanpa spasi

Keyword Satu                    2                              keywordsatudua.com                    keywordsatu

                                                                                Mejakeywordsatu.com                 keywordsatu

Jadi ada 4 kolom.

Problem : ane pernah punya program yang ngescrape data dari google search result, cuman bisa ngejalanin 200 atau 2rb keyword per hari, agak lupa. sedangkan program ini ane harapkan bisa menjalankan sampai 10rb keyword sekali jalan atau perhari. Jadi ane minta programnya bisa memiliki minimal sukses rate 70%, jadi diantara 10rb itu harus bisa menscrape data minimal dari 7rb keyword. Kalau kurang dari itu ane anggap gagal. Ane kurang paham kenapa alat nya dulu itu dibatasi, entah dibanned google atau masalah captcha atau yang lainnya, jadi harus bisa mencari solusinya.

Kalau program ini berhasil dibuat ada beberapa pengembangan kedepannya yang berkaitan dengan scrape data dari google, yang tentu saja ada tambahan feenya.

dan diharapkan reportnya ditulis ketika programnya berjalan, jadi tidak menunggu ketika semuanya telah selesai baru di write, untuk menghindari terjadinya closed program secara mendadak, jadi tidak diulang dari awal.

 

Delphi XE/XE2 Web Programming PHP Delphi VisualBasic Desktop Programming Visual Studio

Project Class: Small (500rb-5jt)
Published Budget: Rp 1,000,000
Finish Days: 7
Published Date: 28/12/2016 02:09:50 WIB
Start Date: 30/12/2016 11:57:07 WIB
Project Status: Closed
Accepted Worker: cyb3rs0nic (Cyb3rS0nic)
Accepted Budget: Rp 1,250,000
Project Ending: Arbitrated
Finish Date:

Project Owner

didik321
    
8.67/10.00
165 Point
#795 dari 99,433

Accepted Worker

Cyb3rS0nic
Kota Palembang
    
0.00/10.00
-50 Point
#2,984 dari 99,433

Penyelesaian Arbitrase

Tim Arbitrator sudah memberikan keputusan berdasarkan fakta-fakta yang tercatat di sistem kami. Adapun keputusan yang diambil adalah sebagai berikut:

  • 100%
    dari dana project atau sebesar Rp 1,250,000 untuk Owner didik321.
  • 0%
    dari dana project atau sebesar Rp 0 untuk Worker Cyb3rS0nic (belum dipotong fee, jika ada).

Di samping itu Tim Arbitrator juga memberikan rating kepada kedua belah pihak sebagai berikut:

  •      (10/10) dan 63 point untuk Owner didik321.
  •      (0/10) dan 25 point untuk Worker Cyb3rS0nic.

Keputusan ini bersifat final dan tidak dapat diganggu gugat. Dengan demikian project kami nyatakan ditutup.

  User Bids

kempyeng88
    
10.00/10.00

derodevil
    
9.45/10.00

deddys13
    
8.00/10.00

fastandsecure
    
0.00/10.00

helmy2106
    
0.00/10.00

Cyb3rS0nic
    
0.00/10.00

Recommended Workers

lexdorf17

16,000 points
57 projects
    
9.76/10.00

Iswanto

10,088 points
191 projects
    
9.55/10.00

rolldev

4,167 points
8 projects
    
8.67/10.00

idlamalif

4,642 points
79 projects
    
9.86/10.00

mas.adi

4,664 points
20 projects
    
9.75/10.00

Recommended Services

Pembuatan template website

Rp 300,000
9 sales
    
10.00/10.00

Pembuatan bot line

Rp 1,500,000
2 sales
    
10.00/10.00

Jasa pembuatan website portal berita auto content

Rp 950,000
3 sales
    
9.33/10.00

Jasa Pembuatan Website Streaming Film

Rp 750,000
3 sales
    
9.33/10.00

Open Projects

Jasa Slicing Homepage 1 halaman saja (PSD to HTML)

Rp 200,000Owner: meiliana
Deadline: 3 days

Butuhkan website yang interaktif untuk keperluan sosial

Open to SuggestionsOwner: solanaism
Deadline: 60 days

Dibutuhkan Web Developer dan Web Designer Untuk Pembuatan Website Musik

Rp 1,000,000Owner: andinkinanthi
Deadline: 7 days

Butuh Integrasi Ongkir

Open to SuggestionsOwner: kriting
Deadline: 7 days