python / bash dll mass post data checker

 

saya ingin membuat checker script pyhton bash untuk mengecek url valid atau tidak valid...

contoh kasus website : 

curl -X POST -d "_IWP_JSON_PREFIX_eyJpd3BfYWN0aW9uIjoicmVhZGRfc2l0ZSIsInBhcmFtcyI6eyJ1c2VybmFtZSI6ImFkbWluIn19" http://4thaphw.org/

response :

_IWP_JSON_PREFIX_eyJlcnJvciI6IlBsZWFzZSBkZWFjdGl2YXRlICZhbXA7IGFjdGl2YXRlIEluZmluaXRlV1AgQ2xpZW50IHBsdWdpbiBvbiB5b3VyIHNpdGUsIHRoZW4gYWRkIHRoZSBzaXRlIGFnYWluLiIsImVycm9yX2NvZGUiOiJkZWFjdGl2YXRlX2N0aXZhdGVfSW5maW5pdGVXUF9DbGllbnRfcGx1Z2luX2FkZF9zaXRlX2FnYWluX25vdF9pd3BfY2xpZW50X25vc3NsX2tleSJ9

kodisi:

ketika response ada kata2 Valid

ketika response tidak ada kata2 itu berarti non valid

script fitur:

* bulk url (menngunakan list url ) penggunaan script.py listurl.txt

*menampilkan procces checker nya 

format : 

http://domain.com <<< valid (hijau)

http://domain.com <<< Non valid(merah)

* auto save url valid / non valid

* di kasih time out jadi misal kan ada yang lama kebuka next ke url selanjutnya.

* cek response code 403,404,500 skip next ke url selanjutnya <<< mempercepat scan

* di kasih threads dalam skali proses misalnya 10 url.



Python Bash/Shell

Project Class: Small (500rb-5jt)
Published Budget: Rp 1,000,000
Finish Days: 7
Published Date: 18/01/2020 13:57:46 WIB
Start Date: 18/01/2020 19:10:23 WIB
Project Status: Closed
Accepted Worker: ibnulhusainan (ibnulhusainan)
Accepted Budget: Rp 1,000,000
Project Ending: Completed
Finish Date: 18/01/2020 19:36:12 WIB

Project Owner

kaylaz
    
9.80/10.00
748 Point
#449 dari 236,747
Rated Worker: 10.00/10.00

project di selesaikan dengan bagus

Accepted Worker

ibnulhusainan
Kab. Situbondo
    
9.42/10.00
702 Point
#448 dari 236,747
Rated Owner: 8.50/10.00

owner yang penuh kejelasan dan baik

Terima kasih banyak

Semoga bisa bekerja sama lagi di kesempatan lain


  User Bids

wartakode
    
10.00/10.00

masedi
    
9.38/10.00

ibnulhusainan
    
9.42/10.00

dertha
    
0.00/10.00

Jonatanss1
    
0.00/10.00

Recommended Workers

Iswanto

22,372 points
481 projects
    
9.73/10.00

steven.comptia

38,202 points
848 projects
    
9.97/10.00

Muhammad.Rahman

13,940 points
156 projects
    
9.89/10.00

mas.adi

9,964 points
34 projects
    
9.85/10.00

manakreatif

9,095 points
72 projects
    
9.73/10.00

Recommended Services

Pembuatan bot line

Rp 1,500,000
6 sales
    
10.00/10.00

Whatsapp API (unofficial)

Rp 2,000,000
4 sales
    
10.00/10.00

Aplikasi Jasa Servis dan panggil Teknisi

Rp 3,800,000
2 sales
    
10.00/10.00

Open Projects

Pembuatan Berita Acara via Website

Rp 500,000Owner: PLN_UPDL_Jakarta
Deadline: 7 days

Membutuhkan Plugin Scrape Manga, Boleh Modif atau Bikin Sendiri

Rp 500,000Owner: wobbuffet
Deadline: 7 days

Butuh menyempurnakan Aplikasi POS + Inventory + Accounting

Open to SuggestionsOwner: spatyy
Deadline: 90 days

Website restoran sederhana

Open to SuggestionsOwner: Hadiirawan21
Deadline: 30 days