计算机源码设计项目-1296Python基于Scrapy兼职招聘网站爬虫数据分析设计

2021-08-20 18:19:26 来源：计算机源码设计网 浏览：26次

技术环境: PyCharm + Django2.2 + Python3.7 + Scrapy + Redis + mysql

  本项目爬虫端和网站后台采用Python语言开发，其中爬虫利用的是Scrapy框架可以轻松实现网站数据的抓取，抓取到的兼职信息直接保存到mysql数据库中，前端采用Vue开发，实现了前后端分离的模式，前端请求Django后端接受到数据然后利用echarts画各种统计图。

## 前端开发 ```bash
# 进入项目目录
cd dvadmin-ui
# 安装依赖
npm install
# 建议不要直接使用cnpm安装依赖，会有各种诡异的 bug。
可以通过如下操作解决 npm 下载速度慢的问题。
npm install --registry=https://registry.npm.taobao.org
# 启动服务
npm run dev
# 浏览器访问 http://localhost:8080
# .env.development 文件中可配置启动端口等参数
```### 发布 ```bash
# 构建测试环境
npm run build:stage
# 构建生产环境
npm run build:prod
```## 后端
~~~bash
1. 进入项目目录 cd jzzpfx
2. 在 ./confenv.py 中配置数据库信息
3. 安装依赖环境
 pip install -r requirements.txt
4. 初始化数据
 python manage.py init
5. 启动项目
 python manage.py runserver 0.0.0.0:8000
初始账号：admin 密码：123456

照片名称：1基于Scrapy网上兼职网数据采集爬虫分析源码a


照片名称：2基于Scrapy网上兼职网数据采集爬虫分析源码b


照片名称：3爬虫项目运行抓取数据入mysql


照片名称：4数据分析后台登录


照片名称：5网站登录后查看兼职数据分析图a


照片名称：6网站登录后查看兼职数据分析图b


照片名称：7爬取到的数据分页展示


照片名称：8后台角色信息管理


照片名称：9后台用户信息管理


照片名称：10基于Django的网站端接口源码目录


照片名称：11基于vue前端源码目录


照片名称：12mysql兼职信息表

上一个计算机源码设计：1301Python基于Django在线音乐播放网站设计
下一个计算机源码设计：1295Python基于Django教学资源管理系统网站设计