【爬虫例子】爬虫+服务器+echarts数据可视化
前段时间发了一个爬虫的例子,近期完善整理了一下,全部开源出来(仅供交流学习使用,禁止用于商业用途)。项目包含:爬虫
后端
WEB前端
部分数据
爬虫说明:
输入关键词→爬取列表→爬取详情(爬取完列表后爬取二级界面)→数据清洗→导出CSV
后端说明:
后端会占用80端口用以对请求进行处理,返回需要的json数据,可通过两个组合框的下拉预览json数据
前端说明:
使用echarts制作,分为两个版本,由于后端只负责json的返回,当前端和后端不在同一个端口时会产生跨域的问题,因此我将部分json数据导出做了一个本地版本,请打开:index.html预览,若浏览器支持跨域可打开后端后再打开:index-server.html 查看百度的echarts是真的好用,超级喜欢,下面是这个项目的效果图:由于跨域问题,直接打开网页有可能无法显示图表,可以放到服务器环境下打开,并且我之前爬取了4个关键词,网页的数据是可以切换的,如:http://127.0.0.1/index.html?job=javahttp://127.0.0.1/index.html?job=webhttp://127.0.0.1/index.html?job=uihttp://127.0.0.1/index.html?job=video下载链接:https://t00y.com/file/20110282-442719675
页:
[1]