windows10安装python和mongodb搭建爬虫环境
时间:2022-04-29
本文章向大家介绍windows10安装python和mongodb搭建爬虫环境,主要内容包括安装python、安装python库、安装mongodb、基本概念、基础应用、原理机制和需要注意的事项等,并结合实例形式分析了其使用技巧,希望通过本文能帮助到大家理解应用这部分内容。
最近准备学习python爬虫,搭建环境用了好久,这里记录一下
安装python
首先在官网下载python的安装包,下载3.6版本即可
在安装之前为了防止出错,先要设置一下权限 C:Windowstemp 这个的user用户设置为完全控制
安装完毕后进入cmd执行下 python –version 看是否成功,显示版本则成功
安装python库
一般的库可以直接用pip安装,因为是python3版本,所以用pip3 install [库名称]
pip3 install beautifulsoup4
pip3 install requests
pip3 install pymongo
除了pip安装,还可以使用whl方式,有些安装不上或者有问题的可以用这种方法
首先到 pypi.python.org 搜索需要的库,然后下载下来使用命令安装,这里我需要用到lxml库,找到对应平台下载下来之后在当前目录执行如下命令即可安装成功
pip3 install lxml-4.0.0-cp36-cp36m-win_amd64.whl
安装mongodb
下载并安装 https://www.mongodb.com/download-center#community
安装完成后需要进行一些设置,在c盘目录下创建2个文件夹
c:/data/db c:/data/log
然后再mongodb的bin( C:Program FilesMongoDBServer3.6bin)目录下打开命令行
按顺序执行如下命令,每个单独开命令窗口
mongod.exe --dbpath c:datadb
mongod.exe
mongo.exe
继续在mongo目录下创建一个mogod.cfg文件,内容如下
systemLog:
destination: file
path: c:datalogmongod.log
storage:
dbPath: c:datadb
然后执行命令,引号内替换成自己对应的路径
mongod.exe --config "C:Program FilesMongoDBServer3.6binmongod.cfg" --install
这样就安装成功了,可以用软件测试一下
mongodb官方文档:https://docs.mongodb.com/manual/tutorial/install-mongodb-on-windows/
- JavaScript 教程
- JavaScript 编辑工具
- JavaScript 与HTML
- JavaScript 与Java
- JavaScript 数据结构
- JavaScript 基本数据类型
- JavaScript 特殊数据类型
- JavaScript 运算符
- JavaScript typeof 运算符
- JavaScript 表达式
- JavaScript 类型转换
- JavaScript 基本语法
- JavaScript 注释
- Javascript 基本处理流程
- Javascript 选择结构
- Javascript if 语句
- Javascript if 语句的嵌套
- Javascript switch 语句
- Javascript 循环结构
- Javascript 循环结构实例
- Javascript 跳转语句
- Javascript 控制语句总结
- Javascript 函数介绍
- Javascript 函数的定义
- Javascript 函数调用
- Javascript 几种特殊的函数
- JavaScript 内置函数简介
- Javascript eval() 函数
- Javascript isFinite() 函数
- Javascript isNaN() 函数
- parseInt() 与 parseFloat()
- escape() 与 unescape()
- Javascript 字符串介绍
- Javascript length属性
- javascript 字符串函数
- Javascript 日期对象简介
- Javascript 日期对象用途
- Date 对象属性和方法
- Javascript 数组是什么
- Javascript 创建数组
- Javascript 数组赋值与取值
- Javascript 数组属性和方法
- VBA解压缩ZIP文件07——length和distance扩展
- Excel VBA常用功能加载宏——打开活动工作簿所在文件夹
- 常用功能加载宏——拆分工作表
- MyVBA加载宏——添加自定义菜单04——功能实现
- CS学习笔记 | 14、powerup提权的方法
- VBA解压缩ZIP文件05——Huffman树
- JavaScript|jQuery基础语法
- VBA解压缩ZIP文件03——解压准备工作
- VBA解压缩ZIP文件04——解析ZIP文件结构
- 开发|Springboot简单实现文件上传
- VBA解压缩ZIP文件01——实现的功能
- MyVBA加载宏——添加自定义菜单03——功能分析
- MyVBA加载宏——添加自定义菜单02——给按钮添加单击事件
- 科研猫小课堂:敲黑板!竞争风险模型应该如何分析?
- 常用功能加载宏——快速定位合并单元格