python爬蟲用mongodb的原因：

1、文檔結(jié)構(gòu)的存儲方式

簡單講就是可以直接存json,list

2、不要事先定義”表”,隨時可以創(chuàng)建

3、“表”中的數(shù)據(jù)長度可以不一樣

也就是第一條記錄有10個值，第二條記錄不要規(guī)定也要10個值

對爬蟲這種很亂的數(shù)據(jù)來說，很適用 。

內(nèi)容擴展：

mongoDB介紹：

它的特點是高性能、易部署、易使用，存儲數(shù)據(jù)非常方便。主要功能特性有：

*面向集合存儲，易存儲對象類型的數(shù)據(jù)。

*模式自由。

*支持動態(tài)查詢。

*支持完全索引，包含內(nèi)部對象。

*支持查詢。

*支持復(fù)制和故障恢復(fù)。

*使用高效的二進制數(shù)據(jù)存儲，包括大型對象（如視頻等）。

*自動處理碎片，以支持云計算層次的擴展性。

*支持 Golang，RUBY，PYTHON，JAVA，C++，PHP，C#等多種語言。

*文件存儲格式為BSON（一種JSON的擴展）。

*可通過網(wǎng)絡(luò)訪問。