Em hỏi chút về mysql master slave

E đang setup mô hình mysql master slave trên 2 vps
Vps 1 (master) chứa site chính.
Vps 2 (slave) chứa 3 4 site clone
E đang gặp vấn đề là các site clone không update dc view lên master. Hiện tại e đang dùng phương pháp update ra 1 file txt chứa số lần view bài viết sau đó cứ 2h e insert vào master 1 lần nhưng số lượng viewer quá nhiều dẫn đến lúc insert làm quá tải mysql. Các B cho e giải pháp với.

 

E dùng bên netcup gói 10 cpu ram 32gb bình thường e ko sao nhưng cứ update file txt vào là mysql của e nó lên tầm 300 400% nên e đang muốn hỏi xem có giải pháp nào update từ slave lên master mà không làm mysql load cao ko a ạ

 

Dùng php hàm get file content
E get từ slave lên để update vào mysql master

 

Dẹp vụ view đi. Nếu thực sự cần thiết thì dùng ajax hoặc build 1 hệ thống analytics độc lập.

 

E đang cần cái view này để set TOP các bài trong ngày không có nó cũng hơi dở

 

Chắc là bạn for-loop rồi get cái bài viết, rồi insert view à? Nếu vậy thì dùng bulk update thôi.

 

Cái này dễ mà…. Dùng kết quả của google analytics mà xếp hạng.

lấy top 100 rồi update. Còn lại cho 0 hết.

 

OK cảm ơn cả nhà e dùng bulk update đã giải quyết đc vấn đề. Trình code còn gà nên gặp lỗi

 

@laogiavn hãy nghiên cứu cách bác @sincos chia sẻ á, dùng API của Google Analytics. Bác tự + thêm view khi users hoặc bot xem link thì lượng write trên MySQL hơi nhiều đó, site ban đầu thì thế nào lượng bots vào cũng hơi khủng, đối với dữ liệu thì câu lệnh write tốn CPU, RAM và cả buff/cache trong quá trình write nữa. Tối ưu cái nào được thì tối ưu bác, nhờ Google Analytics lấy new views và popular views là chuẩn rồi.

 

trình e code còn gà nên e cứ save và count nó trong 1 file txt lấy nginx để gánh site e hiện tại cũng ít visit tầm 100K/day nên chưa cần có yêu cầu cao lắm

 

Thay vì dùng text file, có thể dùng Redis để performance tốt hơn.
Hiện tại t cũng đang chạy cái vụ view như này:
+ 1 process riêng dùng để insert page view vô Redis, với key là id của bài đó, value là view, 1 lần gọi lên là update view thôi(nên tạo Redis db riêng cho cái page views thôi, ko xài chung với db khác, để query nhanh hơn)
+ 1 cronjob chạy cuối ngày, lấy từ Redis rồi insert vô Mysql.
TOP ngày hiện tại thì cứ lấy dữ liệu của ngày trước đó thôi.
Hiện tại thì thấy vẫn chạy ổn, với 4M page views/ngày(1 server thôi, ko có master-slave gì hết)

 

Ôi, site giàu $ thế. 4M pageviews nếu ko tính bots thì cực thơm, dù tính bots thì users cũng khoảng 25% của 4M. 1 tháng bèo bèo cũng 15M unique users. Site khủng thế này thuộc thể loại truyện quá?

 

Haha, site được Gồ độ nhè nhẹ bác ah. Mà page views nhiều thôi, chứ unique users tầm 1/2 bác nói thôi.

 

Để e thử nếu ko đc B help e nhé!

--- Double Post Merged, Feb 28, 2022, Original Post Date: Nov 19, 2021 ---

E đã cache viewer bằng redis server của e 32GB RAM không hiểu sao ram lại cạn kiệt và các prefix e đặt cho view nó tự xoá và ghi đè lên bác có bị tình trạng này ko ạ

 

Bạn lưu key redis kiểu gì, mỗi post 1 key à

 

vâng e lưu mỗi post 1 key e sợ lại lưu như txt nó trồng chéo lên nhau