Python Mongodb 查询以及批量写、批量查

╰半夏微凉° 2022-05-21 10:47 295阅读 0赞

### 查询 ###

查询包含XXX

`db.newcaruserinfo.find({'UserName':{"$regex": "\\*"}}) \\转义`

简单的聚合查询:

value = my\_set.aggregate(\[\{'$group':\{'\_id':"$fence\_id", 'num\_tutorial':\{'$sum':1\}\}\}\])

\#类似于:select  fence\_id,count(\*) from \*\*\* group by fence\_id

查询包含XXX

`{``name``:/xxx/}`

查询以XXX开头

`{``name``:/^xxx/}`

查询以XXX结尾

`{``name``:/xxx^/}`

查询忽略大小写

`{``name``:/xxx/i}`

1 ) . 大于，小于，大于或等于，小于或等于

$gt:大于  
$lt:小于  
$gte:大于或等于  
$lte:小于或等于  
  
例子：  
  
db.collection.find(\{ "field" : \{ $gt: value \} \} ); // greater than : field > value  
db.collection.find(\{ "field" : \{ $lt: value \} \} ); // less than : field < value  
db.collection.find(\{ "field" : \{ $gte: value \} \} ); // greater than or equal to : field >= value  
db.collection.find(\{ "field" : \{ $lte: value \} \} ); // less than or equal to : field <= value

如查询j大于3,小于4:

db.things.find(\{j : \{$lt: 3\}\});  
db.things.find(\{j : \{$gte: 4\}\});

也可以合并在一条语句内:

db.collection.find(\{ "field" : \{ $gt: value1, $lt: value2 \} \} ); // value1 < field < value

2) 不等于 $ne

例子：

db.things.find( \{ x : \{ $ne : 3 \} \} );

3) in 和 not in ($in $nin)  
  
语法：  
db.collection.find( \{ "field" : \{ $in : array \} \} );

例子：

db.things.find(\{j:\{$in: \[2,4,6\]\}\});  
db.things.find(\{j:\{$nin: \[2,4,6\]\}\});  
  
  
4) 取模运算$mod  
  
如下面的运算：  
db.things.find( "this.a % 10 == 1")

可用$mod代替：

db.things.find( \{ a : \{ $mod : \[ 10 , 1 \] \} \} )  
  
  
5)  $all  
  
$all和$in类似，但是他需要匹配条件内所有的值：  
  
如有一个对象：  
  
\{ a: \[ 1, 2, 3 \] \}

下面这个条件是可以匹配的：

db.things.find( \{ a: \{ $all: \[ 2, 3 \] \} \} );

但是下面这个条件就不行了：

db.things.find( \{ a: \{ $all: \[ 2, 3, 4 \] \} \} );  
  
6)  $size  
  
$size是匹配数组内的元素数量的，如有一个对象：\{a:\["foo"\]\}，他只有一个元素：  
  
下面的语句就可以匹配：db.things.find( \{ a : \{ $size: 1 \} \} );

官网上说不能用来匹配一个范围内的元素，如果想找$size<5之类的，他们建议创建一个字段来保存元素的数量。

You cannot use $size to find a range of sizes (for example: arrays with more than 1 element). If you need to query for a range, create an extra size field that you increment when you add elements.

7）$exists

$exists用来判断一个元素是否存在：

如：

db.things.find( \{ a : \{ $exists : true \} \} ); // 如果存在元素a,就返回  
db.things.find( \{ a : \{ $exists : false \} \} ); // 如果不存在元素a，就返回  
  
8)  $type

$type 基于 [bson][] type来匹配一个元素的类型，像是按照类型ID来匹配，不过我没找到bson类型和id对照表。

db.things.find( \{ a : \{ $type : 2 \} \} ); // matches if a is a string  
db.things.find( \{ a : \{ $type : 16 \} \} ); // matches if a is an int  
9）正则表达式  
  
mongo支持正则表达式，如：  
  
db.customers.find( \{ name : /acme.\*corp/i \} ); // 后面的i的意思是区分大小写  
  
10)  查询数据内的值  
  
下面的查询是查询colors内red的记录，如果colors元素是一个数据,数据库将遍历这个数组的元素来查询。db.things.find( \{ colors : "red" \} );  
  
11) $elemMatch  
  
如果对象有一个元素是数组，那么$elemMatch可以匹配内数组内的元素：  
  
> t.find( \{ x : \{ $elemMatch : \{ a : 1, b : \{ $gt : 1 \} \} \} \} )   
\{ "\_id" : ObjectId("4b5783300334000000000aa9"),   
"x" : \[ \{ "a" : 1, "b" : 3 \}, 7, \{ "b" : 99 \}, \{ "a" : 11 \} \]  
\}$elemMatch : \{ a : 1, b : \{ $gt : 1 \} \} 所有的条件都要匹配上才行。

注意，上面的语句和下面是不一样的。

> t.find( \{ "x.a" : 1, "x.b" : \{ $gt : 1 \} \} )  
$elemMatch是匹配\{ "a" : 1, "b" : 3 \}，而后面一句是匹配\{ "b" : 99 \}, \{ "a" : 11 \}   
  
  
12)  查询嵌入对象的值  
  
db.postings.find( \{ "author.name" : "joe" \} );

注意用法是author.name，用一个点就行了。更详细的可以看这个链接： [dot notation][]

举个例子：

> db.blog.save(\{ title : "My First Post", author: \{name : "Jane", id : 1\}\})

如果我们要查询 authors name 是Jane的, 我们可以这样：

> db.blog.findOne(\{"author.name" : "Jane"\})

如果不用点，那就需要用下面这句才能匹配：

db.blog.findOne(\{"author" : \{"name" : "Jane", "id" : 1\}\})

下面这句：

db.blog.findOne(\{"author" : \{"name" : "Jane"\}\})

是不能匹配的，因为mongodb对于子对象，他是精确匹配。

13) 元操作符 $not 取反

如：

db.customers.find( \{ name : \{ $not : /acme.\*corp/i \} \} );db.things.find( \{ a : \{ $not : \{ $mod : \[ 10 , 1 \] \} \} \} );

### **创建连接** ###

conn=MongoClient('127.0.0.1',27017)

db=conn.test  \#连接test库

my\_set=db.test \#l连接test表

### **查询指定数据** ###

imeis=\[ \]

value=db.vin\_change.find(\{'imei':\{'$in':imeis\}\})

db.blog.find() 相当于select \* from blog   
db.blog.find(\{"age":27\}) 相当于select \* from blog where age='27'  
db.blog.find(\{"age":27,"name":"xing"\}) 相当于select \* from blog where age='27' and name="xing"  
db.blog.find(\{\},\{"name":1\}) select name from blog ,如果name：0则是不显示name字段  
db.blog.find().limit(1) 相当于select \* from blog limit 1

db.blog.find().sort(\{\_id:-1\}).limit(1)相当于select \* from blog order by \_id desc limit 1  
db.blog.find().skip(10).limit(20) 相当于select \* from blog limit 10,20

### **导入导出表** ###

在命令行运行:

**导出:**

mongoexport -d dbname -c collectionname -o file --type json/csv -f field

参数说明：

-d ：数据库名

-c ：collection名

-o ：输出的文件名

--type ： 输出的格式，默认为json

-f ：输出的字段，如果-type为csv，则需要加上-f "字段名"

示例:sudo mongoexport -d mongotest -c users -o /home/python/Desktop/mongoDB/users.json --type json -f  "\_id,user\_id,user\_name,age,status"

带账号密码：mongoexport --host  --port 27017 --username "b" --password ""  -d risk2 -c company\_rank -o ./company\_rank.json --type json --authenticationDatabase admin

**导入:**

mongoimport -d dbname -c collectionname --file filename --headerline --type json/csv -f field

参数说明：

-d ：数据库名

-c ：collection名

--type ：导入的格式默认json

-f ：导入的字段名

--headerline ：如果导入的格式是csv，则可以使用第一行的标题作为导入的字段

--file ：要导入的文件

示例： sudo mongoimport -d mongotest -c users --file /home/mongodump/articles.json --type json

### **批量写** ###

count=0
        while line:
            count=count+1
            lis=line.split(',')
            data={'_id':lis[0]}
            res.append(data)
            if count%10000==0:
                print count
                my_set.insert(res)
                res=[]
            line=h.readline()
        if res:
            my_set.insert(res)
        h.close()

## **批量查** ##

**value = my\_set.find(\{'\_id':\{'$in':lis\}\})**

[https://www.cnblogs.com/melonjiang/p/6536876.html][https_www.cnblogs.com_melonjiang_p_6536876.html]

[bson]: http://bsonspec.org/
[dot notation]: http://www.mongodb.org/display/DOCS/Dot+Notation+%28Reaching+into+Objects%29
[https_www.cnblogs.com_melonjiang_p_6536876.html]: https://www.cnblogs.com/melonjiang/p/6536876.html