脚本开发,脚本学习,辅助软件
【腾讯云】新用户专属大礼包低至1折【阿里云】云产品通用代金券2000元【阿里云】云小站优惠返现【阿里云】企业级1折特惠【阿里云】3年低至3折
查看: 21|回复: 0

【爬虫例子】爬虫+服务器+echarts数据可视化

[复制链接]

32

主题

32

帖子

184

积分

孩提

Rank: 2

积分
184
发表于 2020-5-11 11:22:44 | 显示全部楼层 |阅读模式

前段时间发了一个爬虫的例子,近期完善整理了一下,全部开源出来(仅供交流学习使用,禁止用于商业用途)。

项目包含
                爬虫
                后端
                WEB前端
                部分数据

        爬虫说明:
                输入关键词→爬取列表→爬取详情(爬取完列表后爬取二级界面)→数据清洗→导出CSV

        后端说明:
                后端会占用80端口用以对请求进行处理,返回需要的json数据,可通过两个组合框的下拉预览json数据

        前端说明:
                使用echarts制作,分为两个版本,由于后端只负责json的返回,当前端和后端不在同一个端口时会产生跨域的问题,因此我将部分json数据导出做了一个本地版本,请打开:index.html预览,若浏览器支持跨域可打开后端后再打开:index-server.html 查看

百度的echarts是真的好用,超级喜欢,下面是这个项目的效果图:

@%QJZD]YPLV0$MBKH61ONZR.png

由于跨域问题,直接打开网页有可能无法显示图表,可以放到服务器环境下打开,

并且我之前爬取了4个关键词,网页的数据是可以切换的,如:

http://127.0.0.1/index.html?job=java

http://127.0.0.1/index.html?job=web

http://127.0.0.1/index.html?job=ui

http://127.0.0.1/index.html?job=video

下载链接:https://t00y.com/file/20110282-442719675





上一篇:对象操作xmp MP4
下一篇:操作txt模块源码
3Q4T网,编程学习交流基地。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表