脚本开发,脚本学习,辅助软件,各种工具软件

宇智波 发表于 2020-5-11 11:22:44

【爬虫例子】爬虫+服务器+echarts数据可视化

前段时间发了一个爬虫的例子,近期完善整理了一下,全部开源出来(仅供交流学习使用,禁止用于商业用途)。项目包含:
                爬虫
                后端
                WEB前端
                部分数据

      爬虫说明:
                输入关键词→爬取列表→爬取详情(爬取完列表后爬取二级界面)→数据清洗→导出CSV

      后端说明:
                后端会占用80端口用以对请求进行处理,返回需要的json数据,可通过两个组合框的下拉预览json数据

      前端说明:
                使用echarts制作,分为两个版本,由于后端只负责json的返回,当前端和后端不在同一个端口时会产生跨域的问题,因此我将部分json数据导出做了一个本地版本,请打开:index.html预览,若浏览器支持跨域可打开后端后再打开:index-server.html 查看百度的echarts是真的好用,超级喜欢,下面是这个项目的效果图:由于跨域问题,直接打开网页有可能无法显示图表,可以放到服务器环境下打开,并且我之前爬取了4个关键词,网页的数据是可以切换的,如:http://127.0.0.1/index.html?job=javahttp://127.0.0.1/index.html?job=webhttp://127.0.0.1/index.html?job=uihttp://127.0.0.1/index.html?job=video下载链接:https://t00y.com/file/20110282-442719675

页: [1]
查看完整版本: 【爬虫例子】爬虫+服务器+echarts数据可视化