![Python 3 爬虫、数据清洗与可视化实战(第2版)](https://wfqqreader-1252317822.image.myqcloud.com/cover/935/32517935/b_32517935.jpg)
3.3 存储数据到MongoDB
MongoDB是一个基于分布式文件存储的数据库,由C++语言编写,旨在为Web应用提供可扩展的高性能数据存储解决方案。
MongoDB是一款介于关系数据库和非关系数据库之间的产品,它在非关系数据库中功能最丰富,最像关系数据库。
3.3.1 下载并安装MongoDB
1.下载MongoDB
到MongoDB的官网下载MongoDB即可。
2.配置本地MongoDB
MongoDB每次启动时都需要在CMD中进行配置,找到安装目录下的bin文件夹路径,如图3-11所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_20.jpg?sign=1739271123-F2v9YXMVHQFcjPWHI7gCSInb3poJ11ux-0-8350c98722ab48d84f9eda5852f3debf)
图3-11
由CMD进入以下路径:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_21.jpg?sign=1739271123-y8bjPRnVr0h3v6kj3XByA1inVnhpTuEp-0-f5c6a4dc3db87688be3165106a2341e9)
配置数据库路径,配置前要先在C盘中新建文件夹,代码如下。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_22.jpg?sign=1739271123-8XiWE8a4Bhp8g20j67XER2p5lN8BNrHj-0-1a115b88b49e7e5891c1edded9854833)
代码运行结果如下所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_23.jpg?sign=1739271123-Jdlfvql2kOV1WCIEHFYpKrMfR4BAkQ2F-0-0636ebcdab7a38014e2e733792d29758)
再打开一个CMD,进入MongoDB确认数据库已经启动,进入bin路径,如下所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_24.jpg?sign=1739271123-7mSZSmNmPEqLKYukGxsImzw8X9tyE3Do-0-c39648b5f1e91519af6aded2ec38e701)
输入“mongo”连接数据库,显示“>”就代表MongoDB已经正常启动,如下所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_25.jpg?sign=1739271123-8M5wWo5XMgGYz3ULxTH9xAQWS4LxaIdF-0-1b0333451ec9a4d92f213770182a1991)
3.3.2 在PyCharm中安装Mongo Plugin
在PyCharm中,依次执行“File”g“Settings”g“Plugins”→“Browse Repositories”命令,输入“mongo”,然后选择“Mongo Plugin”,如图3-12和图3-13所示。
安装好后重新启动PyCharm,就可以在右侧看到Mongo Explorer。
如果没有这个窗口,则可以将鼠标光标停留在左下角的图标上,然后在自动弹出的菜单中选择“Mongo Explorer”命令,如图3-14所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_26.jpg?sign=1739271123-VIbesKGQgdbtupecgzeJZQFEa8bew5Aa-0-4119b5441e5133209884caf4aeab575d)
图3-12
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_27.jpg?sign=1739271123-FDv7iVTAzuk4cqLZgpKVc4UsivEwtx8r-0-7f2c5ad7d78cdb5809232b695c3053ef)
图3-13
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_28.jpg?sign=1739271123-Wqx0upLcqnWCYPmdXmwoY5xqlWps791U-0-20c21f1ecbfc470f008c5b5f66de3695)
图3-14
接下来在Mongo Explorer窗口中单击设置按钮,创建连接(通过PyCharm File菜单中的Settings也可以设置),如图3-15所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_29.jpg?sign=1739271123-jBVXoUuIrlYX4M39dXI9uhmdOV0rQDsA-0-92a0c70ebdb38315280ba9c5c1f451f7)
图3-15
在Mongo Servers设置窗口中单击左侧的加号按钮(addServer),如图3-16所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_30.jpg?sign=1739271123-JtSZb3m0cwWbtrRP28InrBs5E0A2NwW0-0-70476a6540b03ba6c8004fc8a6891501)
图3-16
输入连接名,单击“Test Connection”(测试连接)按钮,当提示信息为“Connection test successful”时表示连接正常,然后单击“OK”按钮保存设置即可,如图3-17所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_31.jpg?sign=1739271123-YOibYDB75zNWuiOeQCedXbdIZUbXttto-0-ad9127791578c9d56d44e1a29f567026)
图3-17
3.3.3 将数据存入MongoDB中
下面尝试将获取的数据存入MongoDB中,首先输入以下代码。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_32.jpg?sign=1739271123-7zC2nKJm36KRdpyV6zHMDl9zlxcQGUbq-0-8855b2e7416cb5becf7f3e6e6c2ee2d1)
运行后双击连接,可以看到名为weather的数据库,如图3-18所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_33.jpg?sign=1739271123-VTlfhQqVf371y1LtdcEd0qDVWZreesKW-0-07911ce3687189bcecd37158d7300930)
图3-18
展开weather数据库,双击sheet_weather_3这张表(见图3-19(b)),会弹出预览窗口(见图3-19(a)),可以从该窗口中观察获取到的天气预报数据,数据以JSON格式存储在数据库中。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_34.jpg?sign=1739271123-3TbuPQBJjrVWFf3hWzafdZfrPVOdlw9l-0-3354296b3ef42aa2c4f1b065822d5661)
图3-19
可以直接在预览窗口中展开JSON的树形结构,如图3-20所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_35.jpg?sign=1739271123-zhIbg7yPfjRVhDfp0Wfqf2YfKItTxee0-0-285aeb463df8df0e0d646f36c644fcb3)
图3-20
需要提前安装PyMongo库,这是一个提供Python和MongoDB连接的库,使用方法如下。
1.建立连接
输入以下代码,其中localhost是主机名,27017是端口号(在默认情况下是这个参数)。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_36.jpg?sign=1739271123-BX0W6WRZST4ePUWsqi3sIGyFJxpKbRoD-0-99043538422d68a4b6a32fbadab63638)
2.新建名为weather的数据库
输入以下代码:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_37.jpg?sign=1739271123-JSGaoAbF0jTxfKVoegtUqgl3iGJ70Dku-0-aaa31f0a79fdd83612559154e819eeea)
3.新建名为sheet_weather_3的表
输入以下代码:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_38.jpg?sign=1739271123-VHeGPm4H8Pb89UzNyiNTPP0FwZxG6rOj-0-94a4148d15a979ef986b1e8ac123afce)
4.写入数据
输入以下代码:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_39.jpg?sign=1739271123-Wm9qOH1rsH7K3zN0wsSJh5iXKAJLFQBD-0-4c9e6dda76f155f3460124616e00025d)