Hướng dẫn mongodb cluster docker - docker cụm mongodb
Như bài lần trước mình đã trình bày về MongoDb cluster (https://viblo.asia/tanphan/posts/oOVlYEmVl8W) Hôm nay mình sẽ cùng nhau tạo 1 cụm mongo với docker, để xem thực hư nó như nào nhé. Đầu tiên là file docker-compose.yml Các bạn tạo 1 thư mục đặt tên là sharding-by-docker-compose, bên trong tạo 1 file docker-compose.yml với nội dung như sau:
Với file docker-compose như trên, mình mới chỉ khởi tạo 3 node cho 1 replica set (replica set là gì các bạn đọc bài trước nhé), mình có map data ra bên ngoài (để sau này khi up lại thì data vẫn còn nguyên) đồng thời cũng map 1 file script ra bên ngoài để build replica set và add sharding. Nội dung file script ở bên đưới. Để build lên 9 node, các bạn cứ lặp lại đoạn code trên (trong khối services thôi nhé) với các chỉ số là shard10, shard11, shard12, shard20,.... lưu ý, nếu có port cổng ra ngoài cũng phải đổi đi nhé, ko nó conflic đấy =)) OK, nhưng chỉ 9 node mongod ko thể tạo thành 1 cụm được, ta phải cố 3 node làm vai trò config server, sau khi điền đủ 30 shard, ta thêm đoạn sau vào khối services :
Ok, mình đã có 3 node làm vai trò config, cũng mount data và 1 file script ra bên ngoài, nội dung file script sẽ bên dưới nhé. Cuối cùng chúng ta cần 2 node mongos đóng vai trò interface, giao tiếp với người dùng, thêm đoạn mã sau:
Được rồi, để chạy thử coi nhé, các bạn chạy lệnh sau (nhớ là vẫn thao tác trong thư mục sharding-by-docker-compose)
Kết qủa là :
Nhưng như vậy vẫn chỉ là các server mongo độc lập, bây h là lúc setup để chúng thành các replica set và sharding. Trong mỗi node mongod ở trên mình có mount 1 thư mục script ra bên ngoài như thế này:
bây giờ, trong thư mục sharding-by-docker-compose, các bạn tạo thư mục scrips, trong scripts tạo các thư mục replicaset_0, replicaset_1 tương ứng, trong mỗi thư mục replicaset_x đấy, tạo 1 file init_mongodb_replicaset.js với nội dung như sau:
OK, file trên sẽ chạy với 3 node shard10, 11 và 12, sau khi chạy đoạn mã trên, 3 node shard10,11,12 sẽ được chỉ định vào 1 replicaset có id là rs1, Làm tương tự với các node shard00,01,02 cứ thế, cứ 3 node sẽ có 1 file script để setup chúng thành 1 replicaset. À, với những node đóng vai trò là config server, các bạn làm tương tự nhé, vì từ mongo 3.0 trở đi, config server cũng là 1 replicaset rồi. Với router (mongos) thì sẽ hơi khác một chút, như trong file docker-compose, khởi tạo router0 mình có mount 1 thư mục script như sau:
Bây giờ các bạn chỉ cần tạo 1 thư mục sharding_replicaset rồi tạo file init_mongodb_sharding_replicaset.js với nội dung như sau:
Đoạn mã trên sau khi được chạy sẽ đưa tất cả các replicaset vào sharding, nghĩa là dữ liệu có thể được phân mảnh trải đều trên các replicaset này (sharding là gì các bạn cũng đọc bài trước nhé) OK, bây giờ sau khi có các đoạn script, các bạn dùng docker exec để access vào các container của shard00, 10, 20 đây là các shard mà mình có mount các file script ra bên ngoài, lưu ý là cứ 3 shard thì mình có 1 file script để setup replicaset, với router và config server tương tự. sau khi access vào với lệnh
các bạn chạy lệnh 0Đoạn lệnh trên để chạy đoạn script trong file config mình viết bên trên thôi mà :v Chạy xong kết quả sẽ như thế này : 1Như vậy là 3 node shard00, 01,02 đã thành 1 replicaset rồi, các bạn chạy tương tự với các replicaset còn lại, kể cả config server và router. Riêng với setup router, các bạn sẽ nhận được kết quả như sau: 2OK, như vậy là đã sharding trên 3 replicaset rs0,1,2 Kiểm tra phát nhé, các bạn access vào 1 shard bất kì với lệnh
trong container bạn vừa access vào, chạy thử lệnh 4sau đó chạy lệnh: 5thông tin của replicaset sẽ hiện ra: 6Vậy là replicaset rs0 có 3 members, cái nào là primary, cái nào là secondary cũng hiện rõ rồi. Kiểm tra vấn đề sharding phát nhẻ, access vào router 0 7Lần lượt chạy lệnh sau 4 9Thông tin về sharding sẽ hiện ra 0tèn ten, vậy là đã xong, các bạn thử insert 100000 bản ghi vào mà coi, 100000 bản ghi đấy sẽ được phân bố rất đều, thôi bài sau mình sẽ hướng dẫn cách chạy test với ycsb nhé. |