MongoDB on Time Friend

记一次MongoDB迁移 - 备份与恢复

Wed, 27 Mar 2019 00:00:00 +0000

最近对自己的的爬虫数据库做了一次迁移,所以在这里记录一下mongodb的备份与恢复

MongoDB数据备份

mongodump -h dbhost -d dbname -o dbdirectory

-h： MongDB所在服务器地址，例如：127.0.0.1，如果没有改的话一般是：127.0.0.1:27017
-d：需要备份的数据库名字，例如：test
-o：备份的数据存放位置，例如：/home/root/xxx，

MongoDB数据恢复

mongorestore -h <hostname><:port> -d dbname <path>

–host <:port>, -h <:port>： MongoDB所在服务器地址，默认为： localhost:27017
–db , -d ：需要备份的数据库名字，例如：test
–drop：先删除现有的数据,再恢复数据
：指定备份文件的目录
–dir：指定备份文件的目录,不能同时指定和 –dir 选项。

MongoDB - 在Egg中使用MondoDB

Fri, 18 May 2018 00:00:00 +0000

MongoDB官方有提供node操作数据库的 driver 及 API : node-mongodb-native

在egg社区也有基于该插件二次封装的egg插件 egg-mongo-native

对一些方法做了一些二次封装,也可以调用原版的方法.

配置

官方文档也有相关的配置说明,但是我在实际使用中碰到了一些问题. 下面我给出正确的配置方法,供大家使用.其他相关知识请参照该插件都官方文档.

// {app_root}/config/config.default.js
export default (appInfo) => {
 const config = {};
 config.mongo = {
 client: {
 host: '127.0.0.1',
 port: '27017',
 name: 'dandelion'
 },
 }
 return config;
};

开启插件

// config/plugin.js

const plugin = {
 mongo :{
 enable: true,
 package: 'egg-mongo-native',
 }
};

要跟以上配置一样,才能正确使用该插件.

其他复杂配置请参照该插件的官方文档. egg-mongo-native

MongoDB - 文档的基本操作 (二)

Sun, 13 May 2018 00:00:00 +0000

文档更新

语法: update(, , )

#更新rank字段
> db.posts.update({"title":"怪物猎人世界评测"}, {$set: {"rank": 10} });

# 更新整条数据为:{"rank": 99}
> db.posts.update({"title":"怪物猎人世界评测"}, {"rank": 99});

# 更新多条记录multi: true,如果为false,则是更新查询到的第一条记录
> db.posts.update({"tag":"it"}, {$set: {"rank": 60}}, {multi: true});

操作文档字段的函数

$inc:递加
$mul:相乘
$rename:改名
$set:新增or修改
$unset:字段删除

# 字段值递增,结果为: 字段值 + 1
> db.posts.update({title:"怪物猎人世界评测"}, {$inc: {rank: 1}});

# 字段值相乘操作,结果为: 字段值 * 2
> db.posts.update({title:"怪物猎人世界评测"}, {$mul: {rank: 2}});

# 字段重命名
> db.posts.update({title:"怪物猎人世界评测"}, {$rename: {"rank": "score"}});

# 设置或者添加字段
> db.posts.update({title:"怪物猎人世界评测"}, {$set: {"istop": true}});

# 删除istop 字段
> db.posts.update({title:"怪物猎人世界评测"}, {$unset: {"istop": true}});

文档特殊更新

upsert:有则更新，无则追加
remove:条件删除数据

$ mongo
# 更新整条数据
> db.posts.update({title:"其实创造比大志好玩"}, {title:"其实创造比大志好玩", "rank":5,"tag":"game"});

#更新或者添加数据
> db.posts.update({title:"其实创造比大志好玩"}, {title:"其实创造比大志好玩", "rank":5,"tag":"game"}, {upsert:true});

# 删除数据
> db.posts.remove({title:"其实创造比大志好玩"});

索引

getIndexes() 获取索引
createIndex({…}, {…}) 添加索引
dropIndex({…}) 删除索引

# 获取索引
> db.posts.getIndexes();

# 创建rank为降序索引
> db.posts.createIndex({rank:-1});

# 删除索引
> db.posts.dropIndex({rank:-1});

# 创建一个升序索引,并且不能重复,后续title重复则添加失败
> db.posts.createIndex({title:1}, {unique:true});

MongoDB - 文档的基本操作 (一)

Sat, 12 May 2018 00:00:00 +0000

文档增删

# 创建集合
> db.createCollection("posts");

# 插入一条数据
> db.posts.insert(
... {
... title: "我的第一篇博客",
... content: "已经开始写博客了，太激动了。"
... }
... );

# 查询数据
> db.posts.find();

# 插入另一条数据
> db.posts.insert(
... {
... title: "我的第二篇博客",
... content: "写点什么好呢？",
... tag: ["未分类"]
... }
... );



# 使用js for 来循环插入数据
> for(var i = 3; i <=10; i++ ) {
... db.posts.insert({
... title: "我的第" + i + "篇博客"
... });
... }

# 查询数据
> db.posts.find();

# 查看数据count
> db.posts.count();

# 删除集合所有数据
> db.posts.remove({});

> db.posts.find();

文档带条件查询

# 查询tag 为game的数据
> db.posts.find({"tag": "game"});

# 查询 rank大于或等于4的数据
> db.posts.find({"rank": {$gte: 4}});

# 查询 rank大于或等于4的数据
> db.posts.find({"rank": {$gt: 4}});

# 查询 rank小于或等于4的数据
> db.posts.find({"rank": {$lte: 4}});

# 查询 rank小于4的数据
> db.posts.find({"rank": {$lt: 4}});

# 正则查询
> db.posts.find({"title": /u/});

# 多条件查询
> db.posts.find({"title": /u/, "rank":{$gte:5} });

# $or 或条件查询
> db.posts.find({$or: [{"title": /u/}, {"rank":{$gte:4}}] });

# $in 包含, 查询rank中又3,4的数据
> db.posts.find({"rank": {$in: [3,4]} });

# 判断是否存在
> db.posts.find({"istop": {$exists: true} });

# 查询文章中有三个标签的数据
> db.posts.find({'tag': {$size: 3}});

# 获取所有的tag类型,distinct作用是获取集合中指定字段的不重复值，并以数组的形式返回
> db.posts.distinct("tag");

MongoDB 与 RDBMS Where 语句比较

操作	格式	范例	RDBMS中的类似语句
等于	{:}	db.col.find({“by”:“test”}).pretty()	where by = ’test'
小于	{:{$lt:<value%}}	db.col.find({“likes”:{$lt:50}}).pretty()	where likes < 50
小于或等于	{:{$lte:<value%}}	db.col.find({“likes”:{$lte:50}}).pretty()	where likes <= 50
大于	{:{$gt:<value%}}	db.col.find({“likes”:{$gt:50}}).pretty()	where likes > 50
大于或等于	{:{$gte:<value%}}	db.col.find({“likes”:{$gte:50}}).pretty()	where likes >= 50
不等于	{:{$ne:<value%}}	db.col.find({“likes”:{$ne:50}}).pretty()	where likes != 50

指定抽出字段

语法: db.[collection_name].find({}, {field1: true, field2: 1})

MongoDB - 数据库与集合的基本操作

Fri, 11 May 2018 00:00:00 +0000

数据库基本操作

# 进入命令行
$ mongo

#帮助
> help

#退出
> exit

#显示所有数据库
> show dbs;

#进入或者创建集合
> use aliliblog;

#查看当前数据库状态
> db.stats();

# 删除数据库
> db.dropDatabase();

操作集合（Collection）



# 查看集合
> show collections;

# 创建集合
> db.createCollection("users");

# 集合重命名
> db.users.renameCollection("staff"); // users -> staff

# 集合删除
> db.staff.drop();

MongoDB - 基本概念与其他数据库对比

Thu, 10 May 2018 00:00:00 +0000

基本概念

NoSql

在NoSql的数据库中，操作数据都是通过指令或程序语言完成的。

在MongoDB中使用过JavaScript和JSON数据结构，来操作和管理数据的。

MongoDB数据库与关系型数据库对比

MongoDB	关系型数据库
数据库（Database)	数据库（Database）
集合（Collection）	数据表（Table）
文档（Document）	记录（Record）

MongoDB与RDBMS对应的术语

MongoDB	RDBMS
数据库	数据库
集合	表格
文档	行
字段	列
嵌入文档	表联合
主键 (MongoDB 提供了 key 为 _id )	主键

MongoDB 数据类型

数据类型	描述
String	字符串。存储数据常用的数据类型。在 MongoDB 中，UTF-8 编码的字符串才是合法的。
Integer	整型数值。用于存储数值。根据你所采用的服务器，可分为 32 位或 64 位。
Boolean	布尔值。用于存储布尔值（真/假）。
Double	双精度浮点值。用于存储浮点值。
Min/Max keys	将一个值与 BSON（二进制的 JSON）元素的最低值和最高值相对比。
Array	用于将数组或列表或多个值存储为一个键。
Timestamp	时间戳。记录文档修改或添加的具体时间。
Object	用于内嵌文档。
Null	用于创建空值。
Symbol	符号。该数据类型基本上等同于字符串类型，但不同的是，它一般用于采用特殊符号类型的语言。
Date	日期时间。用 UNIX 时间格式来存储当前日期或时间。你可以指定自己的日期时间：创建 Date 对象，传入年月日信息。
Object ID	对象 ID。用于创建文档的 ID。
Binary Data	二进制数据。用于存储二进制数据。
Code	代码类型。用于在文档中存储 JavaScript 代码。
Regular	expression 正则表达式类型。用于存储正则表达式。

MongoDB - 安装与启动

Wed, 09 May 2018 00:00:00 +0000

什么是MongoDB？

MongoDB是一个面向文档的免费数据库，多用于数据采集和分散处理(Map/Reduce)，特别是在大数据处理方面比较擅长。

MongoDB 是一个基于分布式文件存储的数据库。由 C++ 语言编写。旨在为 WEB 应用提供可扩展的高性能数据存储解决方案。

MongoDB 是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。

macOS OS安装与启动

安装

最简单的是通过 brew 安装


brew update

# 就这样mac上就安装好了
brew install mongodb

# 如果你需要最新的开发版本
brew install mongodb --devel

启动

#新建默认数据文件夹
mkdir -p /data/db

# 直接启动
mongod

# 指定路径启动
mongod --dbpath <path to data directory>

# 连接默认端口数据库
mongo

#指定端口连接数据库
mongo --host 127.0.0.1:27017

centOS安装与启动

安装

新建一个文件 /etc/yum.repos.d/mongodb-org-4.0.repo

[mongodb-org-4.0]
name=MongoDB Repository
baseurl=https://repo.mongodb.org/yum/redhat/$releasever/mongodb-org/4.0/x86_64/
gpgcheck=1
enabled=1
gpgkey=https://www.mongodb.org/static/pgp/server-4.0.asc

通过yum安装数据库