Server Chịu tải 20M request

Discussion in 'Hỏi Đáp Kỹ Thuật' started by Phan Thị, Oct 21, 2019.

  1. Phan Thị

    Phan Thị Bang Chúng

    Mình đang host tại vultr và digitalocean , Server chỉ chạy 1 ngày 10 phút và cần chiụ dc khoảng 20 triệu request trong 10 phut đó, Đang chạy trên con vps 8core.16gb ram 160$/m nhưng vẫn bị lỗi 500, không biết config ntn cho nhanh giờ, request chỉ có update và get. db siêu nhẹ chỉ có 1MB và 3k record, tất cả đều index nhưng ko hiệu quả vì update và get chỉ trong 10phut thôi
    mong chỉ giáo
     
    Last edited: Nov 22, 2019
  2. hoangvn92.it

    hoangvn92.it Sơ Nhập Giang Hồ

    sao vs số tiền đó ko mua server. mình thấy bên online.net 160$ cũng ngon

    - Get thì cache lại
    - index ko đánh vào những cột thường xuyên update (gắn vào đây nó còn làm chậm đi chứ ko nhanh lên đâu).
    trước đây mình cũng đánh full. nhưng thường xuyên bị die. sau đó bỏ bớt ở mấy cột thường xuyên update (vd :: view) là okie lại
     
    Phan Thị likes this.
  3. command

    command Bang Chúng

    Theo bạn mô tả, với mình thì mình sẽ cache toàn bộ DB của bạn (có 3k rows với 1MB thôi) vào RAM, cụ thể bạn có thể dùng Redis https://redis.io, khi qua 10 phút căng thẳng này, thì code sẽ lưu 3k records từ RAM vào DB như MySQL. Website này của bạn khá đặc biệt nha vì chỉ chạy trong 10p và có tới 20 triệu request/10m.
     
    Tuan and Phan Thị like this.
  4. Phan Thị

    Phan Thị Bang Chúng

    Database chắc cũng không 1 phần. Không biết tối ưu nginx với php ntn cho hiệu quả. Toàn lỗi 500
     
  5. money

    money Hương Chủ

    @command giống mấy web soi lô đề, xổ số thì nó chỉ online lúc 5h chiều 1 tí rồi thôi
     
    kook, Tony Vu and hoangvn92.it like this.
  6. Nai

    Nai MiddleMan Staff Member

    {waaaht} Thánh đoán
     
  7. Thanh Nguyen

    Thanh Nguyen Bang Chúng

    20 triệu request trong 10P. Nghe ghê vãi. Cỡ DDOS chứ đùa {haha}{haha}{haha}
     
  8. Phan Thị

    Phan Thị Bang Chúng

    Thank mình cũng đoán vậy, đã bỏ index đi test thử xem ntn.
     
  9. Phan Thị

    Phan Thị Bang Chúng

    redis mình ko hiểu nó cache ntn với update liên tục như vậy
     
  10. console

    console Bang Chúng

    Nghe đâu realtime databse như firebase chịu được 10k write/s. Bác thử xem sau giờ xổ số thì convert lại msql xiu chứ mấy.
     
  11. money

    money Hương Chủ

    Amazon EC2 auto scaling hân hạnh tài trợ.
     
    console and Tony Vu like this.
  12. JohnWick

    JohnWick Sơ Nhập Giang Hồ

    Bác mô tả thêm request như thế nào để anh em có thể tư vấn xem, Vấn đề cần xem là điểm nghẽn nằm ở lớp nào để có phương án cho phù hợp
     
  13. JohnWick

    JohnWick Sơ Nhập Giang Hồ

    Với dữ liệu ít mà update liên tục thì bác nên sử dụng memcached. Với hệ thống chỉ online 10p thì bác nên chuyển sang sử dụng amazon service để tối ưu, ngoài ra nó cũng cung cấp nhiều dịch vụ hỗ trợ để bác scale nhanh chóng
     
  14. console

    console Bang Chúng

    Memcached k khả thi lắm, Redis thì họa may nhưng mà vẫn k bằng firebase hay amz auto ec2
     
  15. Huynh Minh Chi

    Huynh Minh Chi Tân Thủ Thôn

    Amz EC2 thử đi bác
     
  16. Phan Thị

    Phan Thị Bang Chúng

    ec2 có điểm gì hay vậy nhỉ ? thấy nó vps cũng yếu mà sao so dc với vultr ? hoăc linode ?
     
  17. JohnWick

    JohnWick Sơ Nhập Giang Hồ

    Nếu sử dụng aws thì phải sử dụng các service nội tại của nó nữa. Một mình EC2 thì khác gì cloud server thông thường đâu
     
  18. money

    money Hương Chủ

  19. console

    console Bang Chúng

    One year ago, our cluster was composed of 30 dedicated servers split in a hot-warm architecture. Our hot layer was composed of 15 servers with CPUs with 20 threads and 5 SSD disks in RAID0, while our warm layer was composed of 15 servers with lower CPUs in order to reduce the cost because the data inside the warm layer are less requested.

    1 năm trước của nó kinh vãi, mà giá của nó cũng kinh vãi 1k5/1m :-s
     
  20. fixbug

    fixbug Moderator Staff Member

    thật là quá kinh hãi