Dismiss Notice

[Hỏi] Không Curl được review, question

Discussion in 'Thảo Luận Chung' started by Nai, Dec 15, 2017.

Tags:
Page 1 of 2
  1. Nai

    Nai MiddleMan Staff Member

    Chuyện là em cần kéo một số comment , review. Nhưng khi dùng curl thì không tháy được các nội dung hiển thị trên web mà f12 thì vẫn thấy
    Thực tế link sản phẩm
    HTML:
    https://www.amazon.com/dp/B005XZ6R1I/
    Khu vực cần lấy gồm 2 anh sau
    upload_2017-12-15_10-19-1.png
    upload_2017-12-15_10-19-12.png
    Nhưng dùng Ctrl+U thì không thấy mấy nội dung này.
    Hiện em đang dùng Php thì làm sao để lấy được mấy anh này
    Ngoài ra thì có một số trang phần comment nó phân trang mà rê chuột và không thấy link gì cả mà click vào thì vẫn load ra từng trang comment mới thì làm sao để load được các content mới đó được?
    Ai đi ngang qua thí em cái key để mò tiếp cũng được ạ {burn_joss_stick}
     

    More Threads in same category

    Nai, Dec 15, 2017
    #1
  2. money

    money Hương Chủ

    {brick}{brick}{brick}
     
    money, Dec 15, 2017
    #2
  3. Nai

    Nai MiddleMan Staff Member

    Convert sang text để em dễ search anh ơi :3{angry}
     
    Nai, Dec 15, 2017
    #3
  4. Phan Thị

    Phan Thị Bang Chúng

    Nó dùng js load thôi mà

    get đoạn này mà ghép vào


    PHP:

    <script type="text/JavaScript">

    P.when("jQuery", "lazyLoadLib","ready").execute(function ($) {
    $(    '#ask_lazy_load_div').lazyLoadContent({
    threshold : 800,
    url: "/gp/ask-widget/askWidget.html?asin=B005XZ6R1I&askError=&askMessage=&wdg=musical_instruments_display_on_website&requestID=SH2RYQ99AREH7FC7C3K5",
    metrics : true,
    name : 'ask_btf',
    cache : false
    });
    });
    </    script>
    </    div>
     
    Phan Thị, Dec 15, 2017
    #4
    Nai likes this.
  5. Phan Thị

    Phan Thị Bang Chúng

    Phan Thị, Dec 15, 2017
    #5
    Nai likes this.
  6. Nai

    Nai MiddleMan Staff Member

    Còn các trang khác thì sao cụ =.= Mì ăn liền ko được linh động lắm. Với lại em ví dụ thôi à chứ em ko curl của amz
     
    Nai, Dec 15, 2017
    #6
  7. Nai

    Nai MiddleMan Staff Member

    Đoạn này ghép như thế nào trong curl đây bác
     
    Nai, Dec 15, 2017
    #7
  8. Phan Thị

    Phan Thị Bang Chúng

    Ghép gì đâu. get content thôi mà
    nhìn đoạn trên nó có như
    thì ghép thêm amazon.com vào thôi là thành

    Code:
    https://www.amazon.com/gp/ask-widget/askWidget.html?asin
     
    Phan Thị, Dec 15, 2017
    #8
    Nai likes this.
  9. Nai

    Nai MiddleMan Staff Member

    Cảm ơn cụ nhiều nhé, em Ctrl+U thì dựa vào phần đoạn mã của cụ thì mò ra được cái thông số cụ nói kết quả trả về json.
    Còn phần rating thì quân sư @console đã tận tình chỉ cách mò request của nó và cũng ra kết quả trả về json
    Cảm ơn 2 cách câu của 2 cụ {cheers}
     
    Nai, Dec 15, 2017
    #9
  10. money

    money Hương Chủ

    Riêng AMZ, nếu muốn lấy Q&A của nó thì cứ theo format này mà táng cho nhanh và dễ nhìn được tổng số page (để tiện crawl lặp cho đến hết số page):
    https://www.amazon.com/ask/questions/asin/B01H5M9OKM/

    Còn các kiểu load ajax khác thì nguyên tắc là sẽ có 1 đoạn mã để mình request theo nó và lấy trang kế tiếp.
    Ngoài ra cũng có cách để crawl được content ajax nhưng không trọn vẹn và cái quan trọng là không chỉ pé @Nai {doubt}{doubt}{doubt}
     
    money, Dec 15, 2017
    #10
    Nai likes this.
  11. Nai

    Nai MiddleMan Staff Member

    May mà còn cách sơ cua, không thôi tiếc hùi hụi vì anh ko chỉ {adore}
     
    Nai, Dec 15, 2017
    #11
  12. Nai

    Nai MiddleMan Staff Member

    Vậy còn hiện tại?
     
    Nai, Dec 15, 2017
    #12
  13. kenyc

    kenyc Tân Thủ Thôn

    Giờ không bị dính trang nào load ajax, mà có bị chắc lại cách như xưa :(
     
    kenyc, Dec 15, 2017
    #13
  14. Nai

    Nai MiddleMan Staff Member

    {beat_plaster}
     
    Nai, Dec 15, 2017
    #14
  15. money

    money Hương Chủ

    Hiện tại giải quyết vấn đề được rồi nhưng chỉ khoe thế thôi nhá {doubt}{doubt}{doubt} Cho thèm chơi {embarrassed}
     
    money, Dec 15, 2017
    #15
  16. kenyc

    kenyc Tân Thủ Thôn

    He he, không phải bác ơi, tại em có cái khung sườn dùng imacro để giải quyết rồi nên cũng không chịu tìm cách khác nữa
     
    kenyc, Dec 15, 2017
    #16
  17. money

    money Hương Chủ

    Anh chọc quê cái pé kia chứ ko phải chọc pé đâu mà giải thích {sure}{sure}{sure}
     
    money, Dec 15, 2017
    #17
    kenyc likes this.
  18. console

    console Bang Chúng

    Pé @Nai ngó bộ sắp mọc sừng dài rồi. Nói sơ sơ mần được hết {big_smile}
     
    console, Dec 15, 2017
    #18
  19. nguagovt

    nguagovt Sơ Nhập Giang Hồ

    Chắc định get lazada đây mà :D
    Mình lười chả bùn làm :p mà cũng ko khoái aff cho lắm
     
    nguagovt, Dec 15, 2017
    #19
  20. Nai

    Nai MiddleMan Staff Member

    {surrender}{surrender}{surrender}
     
    Nai, Dec 16, 2017
    #20
Page 1 of 2