注册 登录  
 加关注
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

simonzhang个人观点

http://www.simonzhang.net 镜像地址

 
 
 

日志

 
 

mongodb 单机的备份与恢复  

2011-07-01 10:59:39|  分类: nosql |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |

【2011-06-30 张子萌】
   备份与恢复是数据保存的重要技术。本次只是学习记录单机的操作。
    mongodb的备份和恢复提供了两种方式。备份为bson格式和和备份为json和csv格式。

a)导出bson格式
    主要用于单机小数据量的备份、快照等。存储被bson格式,bson(Binary JSON ),
是轻量级的二进制数据格式。

    备份命令mongodump
    参数
              --help                   帮助信息
              -v [ --verbose ]         be more verbose (include multiple times for more
                                       verbosity e.g. -vvvvv)
              -h [ --host ] arg        指定要备份的服务器ip
              --port arg               指定要备份的服务器端口,需要与服务器ip一起使用,格式为ip:port
              --ipv6                   开启ipv6的支持,默认是关闭的
              -u [ --username ] arg    用户名
              -p [ --password ] arg    密码
              --dbpath arg             指定连接数据库后访问数据的位置,但是不能是当前使用的目录
              --directoryperdb         为每一个库建立一个目录。
              -d [ --db ] arg          指定要备份的库名
              -c [ --collection ] arg  指定要导出的collection
              -o [ --out ] arg (=dump) 输出的目录,默认目录为执行命令的路径下创建dump目录
              -q [ --query ] arg       可以json查询,有选择性的导出数据
              --oplog                  使用oplog
              --repair                 尝试修复损坏的数据库
              
        恢复命令mongorestore
        参数
              --help                  帮助信息
              -v [ --verbose ]         be more verbose (include multiple times for more
                                       verbosity e.g. -vvvvv)
              -h [ --host ] arg        指定要导入的服务器ip
              --port arg               指定要导入的服务器端口,需要与服务器ip一起使用,格式为ip:port
              --ipv6                   开启ipv6的支持,默认是关闭的
              -u [ --username ] arg    用户名
              -p [ --password ] arg    密码
              --dbpath arg             指定连接数据库后访问数据的位置,但是不能是当前使用的目录
              --directoryperdb         为每一个库建立一个目录。
              -d [ --db ] arg          指定要备份的库名
              -c [ --collection ] arg  指定要导出的collection
              --objcheck              插入前检测对象的合法性
              --filter arg            插入前的过滤器
              --drop                  在导入前删除要导入的集合
              --oplogReplay           恢复日志时间点

        测试,首先查看要测试的数据库(mytest)文件大写
        > show dbs
        admin    (empty)
        mytest    1.953125GB
        开始备份,将本地mytest库导出到tmp目录下
        # mongodump  -d mytest -o /tmp
        导出结束耗时如下
        real    0m5.412s
        user    0m0.007s
        sys    0m2.039s
        导出后数据存为bson格式体积为577M。mytest库里存的是MP3所以导出数据库压缩的不多。

        开始做恢复测试,首先删除mytest库,在导入
        # mongorestore --directoryperdb -d mytest  /tmp/mytest
        导入结束耗时如下:
        real    0m52.587s
        user    0m0.514s
        sys    0m1.732s
        
        总结:导入时间大约是导出时间的10倍。

b)导出json格式
        虽然导出速度快,但是导出为json,csv可能对某些数据类型不兼容,并且不保证数据可以完整导入。
    所以只简单记录一下,就不是实验了。
    导出命令mongoexport
        参数
              -q [ --query ] arg      query filter, as a JSON string
              --csv                   export to csv instead of json
              --jsonArray             output to a json array rather than one object per
                                      line
        
        
    恢复命令mongoimport
    参数
              --ignoreBlanks          在csv,tsv文件中忽略空域
              --type arg              指定导入文件的类型,默认为json,也可以是csv,tsv
              --drop                  导入前先删除原collection
              --headerline            仅导入CSV,TSV文件的第一行作为头文件
              --upsert                插入或更新已存在的对象
              --upsertFields arg      comma-separated fields for the query part of the
                                      upsert. You should make sure this is indexed
              --stopOnError           当导入出现错误时停止
              --jsonArray             导入json array,目前每个array的限制是4M
  评论这张
 
阅读(751)| 评论(0)
推荐 转载

历史上的今天

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2017