av激情亚洲男人的天堂国语,日韩欧美精品一中文字幕,无码av一区二区三区无码,国产又色又爽又刺激的a片,国产又色又爽又刺激的a片

MongoDB分布式自動(dòng)分片(Auto-sharding)研究

MongoDB分布式自動(dòng)分片(Auto-sharding)研究

作者：Crazybaby 2011-07-28 13:24:03

數(shù)據(jù)庫

其他數(shù)據(jù)庫

數(shù)據(jù)庫運(yùn)維

分布式

MongoDB 跳過理論東西，網(wǎng)上有介紹自動(dòng)分片的...直接進(jìn)入配置，有疑問請留言。還是以1000W級數(shù)據(jù)做測試。

跳過理論東西，網(wǎng)上有介紹自動(dòng)分片的...直接進(jìn)入配置，有疑問請留言

還是以1000W級數(shù)據(jù)做測試

不分片的情況下,插入1000W條數(shù)據(jù)到一個(gè)數(shù)據(jù)庫。

數(shù)據(jù)存儲情況如下：

  
 
 
       
  
  
  1. ^_^[root@:/usr/local/mongodb/data/mongodb/test]#ls -lh 
    2.    
  
  
  2. total 4.0G 
    3.    
  
  
  3. -rw------- 1 root root  64M Jul 25 11:25 test.0 
    4.    
  
  
  4. -rw------- 1 root root 128M Jul 25 11:22 test.1 
    5.    
  
  
  5. -rw------- 1 root root 256M Jul 25 11:23 test.2 
    6.    
  
  
  6. -rw------- 1 root root 512M Jul 25 11:25 test.3 
    7.    
  
  
  7. -rw------- 1 root root 1.0G Jul 25 11:25 test.4 
    8.    
  
  
  8. -rw------- 1 root root 2.0G Jul 25 11:24 test.5 
    9.    
  
  
  9. -rw------- 1 root root  16M Jul 25 11:25 test.ns 
    10.

下面進(jìn)行自動(dòng)分片配置：

這里我們選擇兩臺Server做測試

測試機(jī)IP為：

10.X.X.163

10.X.X.228

分別在163，228服務(wù)器上啟動(dòng)Shardsvr進(jìn)程

  
 
 
       
  
  
  1. ^_^[root@:/usr/local/mongodb/bin]#cat runServerShard.sh  
    2.    
  
  
  2. ./mongod --shardsvr -dbpath=../data/mongodb --logpath=../data/shardsvr_logs.txt --logappend --fork 
    3.

在163服務(wù)器上啟動(dòng)configsvr 和 mongos路由進(jìn)程(下面的27019為configsvr的ip，mongos的ip請到log里面去看)

  
 
 
       
  
  
  1. [root@localhost bin]# cat runServerConfig.sh  
    2.    
  
  
  2. ./mongod --configsvr --dbpath=../data/mongodb/config_db/ --logpath=../data/mongodb/log/configsvr_logs.txt --logappend --fork  
    3.    
  
  
  3. [root@localhost bin]# cat runServerMongos.sh  
    4.    
  
  
  4. ./mongos --configdb 10.10.21.163:27019 --logpath=../data/mongodb/log/mongos_logs.txt --logappend --fork 
    5.

查看下是否都啟動(dòng)成功：

  
 
 
       
  
  
  1. [root@localhost bin]# ps -ef | grep 'mongo' 
    2.    
  
  
  2. root     17939     1  2 18:47 ?        00:01:26 ./mongod --shardsvr -dbpath=../data/mongodb --logpath=../data/shardsvr_logs.txt --logappend --fork 
    3.    
  
  
  3. root     18250     1  0 19:05 ?        00:00:00 ./mongod --configsvr --dbpath=../data/mongodb/config_db/ --logpath=../data/mongodb/log/configsvr_logs.txt --logappend --fork 
    4.    
  
  
  4. root     18290     1 12 19:08 ?        00:03:35 ./mongos --configdb 10.10.21.163:27019 --logpath=../data/mongodb/log/mongos_logs.txt --logappend --fork 
    5.

可見3個(gè)服務(wù)都已經(jīng)啟動(dòng)成功。

下面進(jìn)入配置自動(dòng)分片：

用mongo連接mongos進(jìn)程(去log里面看)進(jìn)行配置管理：

  
 
 
       
  
  
  1. > use admin 
    2.    
  
  
  2. switched to db admin 
    3.    
  
  
  3. > db.runCommand({addshard:"10.10.21.163:27018"}); 
    4.    
  
  
  4. { "ok" : 0, "errmsg" : "host already used" } 
    5.    
  
  
  5. > db.runCommand({addshard:"10.7.3.228:27018"}); 
    6.    
  
  
  6. { "shardAdded" : "shard0001", "ok" : 1 } 
    7.    
  
  
  7. > db.runCommand({enableSharding:"test"}) 
    8.    
  
  
  8. { "ok" : 1 } 
    9.    
  
  
  9. > db.runCommand({shardcollection:"test.users",key:{_id:1}}) 
    10.    
  
  
  10. { "collectionsharded" : "test.users", "ok" : 1 } 
    11.

向mongos進(jìn)程進(jìn)行插入1000W數(shù)據(jù)

來看下數(shù)據(jù)的大?。?/p>

163：

  
 
 
       
  
  
  1. ^_^[root@:/usr/local/mongodb/data/mongodb]#ls -lh 
    2.    
  
  
  2. total 2.0G 
    3.    
  
  
  3. -rw-r--r-- 1 root root 1011 Jul 25 12:33 mongodb.log 
    4.    
  
  
  4. -rwxr-xr-x 1 root root    6 Jul 25 12:34 mongod.lock 
    5.    
  
  
  5. drwxr-xr-x 3 root root 4.0K Jul 25 12:39 moveChunk 
    6.    
  
  
  6. -rw------- 1 root root  64M Jul 25 12:42 test.0 
    7.    
  
  
  7. -rw------- 1 root root 128M Jul 25 12:40 test.1 
    8.    
  
  
  8. -rw------- 1 root root 256M Jul 25 12:41 test.2 
    9.    
  
  
  9. -rw------- 1 root root 512M Jul 25 12:42 test.3 
    10.    
  
  
  10. -rw------- 1 root root 1.0G Jul 25 12:41 test.4 
    11.    
  
  
  11. -rw------- 1 root root  16M Jul 25 12:42 test.ns 
    12.    
  
  
  12. drwxr-xr-x 2 root root 4.0K Jul 25 12:38 _tmp 
    13.

228：

  
 
 
       
  
  
  1. [root@localhost mongodb]# ls -lh 
    2.    
  
  
  2. 總計(jì) 2.0G 
    3.    
  
  
  3. drwxr-xr-x 3 root root 4.0K 07-25 19:39 config_db 
    4.    
  
  
  4. drwxr-xr-x 2 root root 4.0K 07-25 18:51 config_repair_db 
    5.    
  
  
  5. drwxr-xr-x 2 root root 4.0K 07-25 19:39 log 
    6.    
  
  
  6. -rwxr-xr-x 1 root root    6 07-25 19:39 mongod.lock 
    7.    
  
  
  7. drwxr-xr-x 3 root root 4.0K 07-25 19:13 moveChunk 
    8.    
  
  
  8. -rw------- 1 root root  64M 07-25 20:38 test.0 
    9.    
  
  
  9. -rw------- 1 root root 128M 07-25 20:38 test.1 
    10.    
  
  
  10. -rw------- 1 root root 256M 07-25 20:40 test.2 
    11.    
  
  
  11. -rw------- 1 root root 512M 07-25 20:41 test.3 
    12.    
  
  
  12. -rw------- 1 root root 1.0G 07-25 20:42 test.4 
    13.    
  
  
  13. -rw------- 1 root root  16M 07-25 20:38 test.ns 
    14.    
  
  
  14. drwxr-xr-x 2 root root 4.0K 07-25 20:38 _tmp 
    15.

自動(dòng)分片成每個(gè)2G。


當(dāng)前題目：MongoDB分布式自動(dòng)分片(Auto-sharding)研究
轉(zhuǎn)載源于：http://uogjgqi.cn/article/dpjohgp.html
掃二維碼與項(xiàng)目經(jīng)理溝通

我們在微信上24小時(shí)期待你的聲音

解答本文疑問/技術(shù)咨詢/運(yùn)營咨詢/技術(shù)建議/互聯(lián)網(wǎng)交流