Cách dùng Bing Seach API không giới hạn

Discussion in 'Hỏi Đáp Kỹ Thuật' started by Cải Lão Ngoan Đồng, Aug 10, 2018.

  1. Cải Lão Ngoan Đồng

    Cải Lão Ngoan Đồng Tân Thủ Thôn

    Em tính search dùng Bing Api, nhưng gói của nó đắt quá 1000 transaction 3$. Các bác có cách nào để get Free hoặc Crawl không bị nó chặn không chỉ em với. Thanks cả nhà
     
  2. Phan Thị

    Phan Thị Bang Chúng

    bing truơcs dùng proxy là pass mà, giờ khó hơn ah
     
  3. money

    money Hương Chủ

    Bing API nào mà bị limit vậy thớt? Vẫn đang dùng image search của nó tẹt ga đây, 10 proxy là thoải mái.
     
    Last edited: Aug 10, 2018
  4. Hoa Mãn Lâu

    Hoa Mãn Lâu Trưởng Môn

    Search kiểu google search à?
     
  5. Cải Lão Ngoan Đồng

    Cải Lão Ngoan Đồng Tân Thủ Thôn

    Em dùng kiểu Google search đó bác
     
  6. Cải Lão Ngoan Đồng

    Cải Lão Ngoan Đồng Tân Thủ Thôn

    Vâng bác, em dùng để search theo keyword
     
  7. Cải Lão Ngoan Đồng

    Cải Lão Ngoan Đồng Tân Thủ Thôn

    Bác dùng gói Free của nó phải không? Em có tầm 30k user tìm kiếm hàng ngày, của bác 10 proxy thì được tầm bao nhiêu transaction vậy bác
     
  8. money

    money Hương Chủ

    Mềnh ko đếm nhưng trung bình 1s có 2,3 requests đến Bing. Mình query thẳng đến nó chứ ko xài api.
     
  9. money

    money Hương Chủ

    À lúc nãy ghi nhầm, dùng image search chứ ko phải image api nha thớt.
    Send htttprequest lấy html, parse ra cái mình cần rồi lưu cache.
     
  10. Cải Lão Ngoan Đồng

    Cải Lão Ngoan Đồng Tân Thủ Thôn

    dùng cUrl rồi cache cookies nó lại à bác?
     
  11. money

    money Hương Chủ

    Mình dùng Web HttpRequest của C# (giống như cURL) để query đến Bing Image Search --> lấy về 1 đống HTML --> parse HTML --> lấy những thứ mình cần và lưu vào file hoặc database để giảm số lượng request đến Bing (chứ ko phải user search/vào siate là request đến Bing).
    Tuy nhiên do nhiều request nên trung bình 1s vẫn cần gọi đến Bing 2-3 lần.
    Dùng 10 proxy. Cứ 1 lần request đến Bing thì lấy ngẫu nhiên 1 proxy trong list 10 cái đó nên tính ra trung bình mỗi proxy vài giây mới gọi đến Bing 1 lần.
    Chỉ có nhiêu đó, ko có tips nào đặc biệt.
     
  12. Hoa Mãn Lâu

    Hoa Mãn Lâu Trưởng Môn

    Sao ko xài xNet cho nhanh mà xài httpRequest anh?
     
  13. money

    money Hương Chủ

    Anh ko thích dùng external lib. Cái nào tự có mà xài tốt thì cứ xài. Giảm tối đa các khả năng phải chỉnh sửa/thay đổi tool khi đi đường dài.
     
    Last edited: Aug 10, 2018
  14. RockSoft

    RockSoft Culi Manager Staff Member

    Trình pro ai xài ext lib hả cưng? Ext lib anh viết đầy và cái nào cũng free và hidden code kiếm chút cháo :)