Deeplink Generator - cách làm aff tối ưu nhất cho anh em autoweb

Bác ơi, cho em hỏi chút, em code clone dữ liệu từ google về làm autoweb mà toàn bị chặn request bác có cách nào xử lý vấn đề này không. Chia sẻ cho e chút kinh nghiệm với. Thanks bác.

 

Dùng proxy và request với chrome useragent nhé

 

Ai biết code hoặc plugin chuyển hướng nào giống với shorten.asia của accesstrade cho mình xin với ạ T.T . Thấy nó đc spam hoài mà k bị block

 

Anh thấy có gì đâu ta, chủ yếu do proxy thôi.
Code crawl thì anh dùng C# .Net 4.5.
Proxy thì hồi xưa loay hoay test qua khá nhiều thằng sau đó anh chốt là dùng bên instantproxies, đến giờ hình như cũng vài năm rồi không đổi. Lúc nhiều nhất dùng khoảng 100 cái (hoặc nhiều hơn 1 xíu - ko nhớ), giờ còn có 20 mà cũng ít crawl lắm. Lần gần nhất anh crawl cách đây tầm 1 tháng thì thấy tỉ lệ proxy die cao hơn nhưng kệ nó vì cũng chưa cần.
Hồi trước có 1 lần tỉ lệ die cũng cao, anh request instantproxies đổi cho danh sách proxy khác (nói rõ là mình requets Google và tỉ lệ die cao quá). Vậy là nó đổi cho bộ proxy mới ngon lành, xài đó giờ.