Danh sách QID của Yahoo Answers

Discussion in 'Chia Sẻ Tài Nguyên Online' started by money, Nov 18, 2021.

  1. money

    money Hương Chủ

    @loyki hỏi anh sitemap của yahoo answers nên anh upload lên đây luôn để ai cần thì download.

    File này chỉ chứa qid chia theo từng năm. Để lấy data thì theo cấu trúc sau:

    https://answers.yahoo.com/question/index?qid={###}

    Link Data:
    Code:
    https://www.dropbox.com/s/j7s99oakthzn2nn/answers.yahoo.qid.rar?dl=0
    Note: dropbox của anh gần full rồi nên anh chỉ để link 1 này thời gian thôi nhé. Khi nào cần thì anh sẽ xóa bớt data để dành chứa data khác. Có thể link sẽ tồn tại vài tuần hoặc vài tháng tùy tình hình.
     
    levis012, Tony Vu, Nai and 3 others like this.
  2. loyki

    loyki Bang Chúng

    cám ơn anh ạ
     
  3. catd3vjl

    catd3vjl Khách Qua Đường

    thank a nhiều :D
     
  4. Nai

    Nai MiddleMan Staff Member

    E tưởng bữa shutdown xong là ko crawl được nữa chứ :
     
  5. money

    money Hương Chủ

    Hehe anh cũng ko crawl nữa sau khi shutdown. Còn các anh em có cách gì đó khác thì anh chịu.
     
    Nai likes this.
  6. paduc83

    paduc83 Tân Thủ Thôn

    Có tiêu đề các qid ko bác
     
  7. levis012

    levis012 Sơ Nhập Giang Hồ

    Data này có full không anh, em check thử thì có tiếng anh, không biết có tiếng việt hay tiếng nào nữa không :D

    Còn thiếu mất mấy năm nữa =))
     
    Last edited: Dec 14, 2021
  8. money

    money Hương Chủ

    Đủ tiếng Anh. Mấy năm gần đây rất ít vì user không xài yahoo answer nữa và cũng không có sitemap.

    các tiếng khác anh không download.
     
    levis012 likes this.
  9. levis012

    levis012 Sơ Nhập Giang Hồ

    Anh mò được ra quả ID này cũng kinh phết. Em đang crawl về nhưng tốc độ có vẻ chậm. Nhưng chắc cứ treo thôi không biết có bị block không.
    upload_2021-12-14_15-27-24.png

    Thanks anh quả ID, lâu rồi thử quay lại xem có ăn thua không. Dịch đã đói kém quá
     
  10. money

    money Hương Chủ

    @levis012 uả em crawl từ đâu về vậy?
     
  11. levis012

    levis012 Sơ Nhập Giang Hồ

    Wayback Machine anh ơi :)) nó có gần như đầy đủ từ 2006 luôn

    Nó có rate limit nhưng em chưa mò ra, nhưng nó đã block em 1 vài phút
     
    firefox and money like this.
  12. thitgaluoc

    thitgaluoc Hương Chủ

    đồng chí này tưởng bỏ nghề rồi chứ?
     
  13. levis012

    levis012 Sơ Nhập Giang Hồ

    Thỉnh thoảng ngứa nghề thì lại quay lại thôi bác. Dạo này đang đói ăn do dịch =))
     
    thitgaluoc likes this.
  14. thitgaluoc

    thitgaluoc Hương Chủ

    inbox mình chỉ cho nguồn tải luôn đỡ phải cào :D chỉ cần parse thôi
     
    vovanhoait likes this.
  15. wpresources

    wpresources Bang Chúng

    Em ke voi nhe :3
     
  16. zinzin8x

    zinzin8x Khách Qua Đường

    Em xin ké với bác :3
     
  17. vovanhoait

    vovanhoait Khách Qua Đường

    Cho e xin ké với..
     
  18. firefox

    firefox Bang Chúng

    ké ít thôi các bác, hiếm mới hót :v