Hỏi về Tools Crawl Image/Proxy

Discussion in 'Thảo Luận Chung' started by JOHN YTB, Apr 22, 2021.

  1. JOHN YTB

    JOHN YTB Sơ Nhập Giang Hồ

    mọi người cho hỏi giải pháp xử lý giúp...

    Tools Crawl ảnh web truyện
    mình thuê 5 Proxy để Crawl nhanh hơn , chỉ config 5s/Request [ Random 1 trong 5 Proxy] để Request
    nếu nhanh hơn thì lại bị Block

    Dùng Proxy VN
    nhưng dùng Proxy là lâu lâu nó bị [Time out] > ko lấy đc đầy đủ ảnh = > chapter có nội dung bị thiếu
    nếu cho Tools đối chiếu lại để check xem có lỗi không thì lại lâu thêm rất nhiều thời gian leech
    Tắt Proxy thì không bị

    ---
    phải xử lý như nào đây mọi người ai giúp với..., hiện tại thì đang tắt Proxy rồi , tốc độ Crawl nó chậm quá
    Lỗi TimeOut này bị Tuỳ Proxy nơi thuê hay do Tools , nguyên nhân gì khác
    -----
    Nơi thuê Proxy : https://proxyvietnamgiare.vsis.net/
     
    Last edited: Apr 22, 2021
  2. Hoa Mãn Lâu

    Hoa Mãn Lâu Trưởng Môn

    Giải pháp là tự làm mấy con proxy tự xài cho khỏe, đỡ phải đi thuê của bên nào. An tâm về chất lượng nữa
     
  3. JOHN YTB

    JOHN YTB Sơ Nhập Giang Hồ

    bị thế là do 100% phía Proxy đúng ko ông

    nếu thế thì để Thuê Proxy bên khác test lại xem sao...
     
  4. Hoa Mãn Lâu

    Hoa Mãn Lâu Trưởng Môn

    Ko chắc là do proxy nhưng thử bên khác mới sure dc
     
  5. Phan Thị

    Phan Thị Bang Chúng

    Vãi 5 proxy mà 150k thì là 7 usd rồi. Đầy chỗ rẻ hơn , Mình hay thuê bên proxy az giá có $1.25 private. Share thì có $0.6 thì phải
     
  6. wpresources

    wpresources Bang Chúng

    Mấy proxy loại giá rẻ như này thì sao bác https://www.webshare.io/proxy-server em chưa mua bao giờ nên hỏi ạ
     
  7. Phan Thị

    Phan Thị Bang Chúng

    Cái đó là share nhiều lắm nên ko nên dùng.
     
    wpresources likes this.
  8. fkphua

    fkphua Tân Thủ Thôn

    Proxy sẽ có một time change ip , lúc đó thường k crawl đc , tuỳ trang mà nó change nhanh hay chậm
     
  9. fkphua

    fkphua Tân Thủ Thôn

    hóng bác ơi :D
     
  10. rugbikk

    rugbikk Tân Thủ Thôn

    Lót dép hóng {adore}