一、pyecharts简介pyecharts主要基于Web浏览器进行显示，绘制的图形比较多，包括折线图、柱状图、饼图、漏斗图地图和极坐标图等。使用pyecharts绘图代码量很少，但绘制的图形比较美观。pyecharts分为v0.5.X和v1两个大版本，v0.5.X和v1间不兼容，v1是一个全新的版本v0.5.X支持Python2

作为爬虫，有时候会经历过需要爬取站点多吗，数据量大的网站，我们身边接触最频繁、同时也是最大的爬虫莫过于几大搜索引擎。今天我们来聊一个同样是站点多数据量的爬取方向，那就是舆情方向的爬虫。舆情简单来说就是舆论情况，要掌握舆情，那么就必须掌握足够多的内容资讯。除

↑关注置顶 有趣的不像个技术号是否真的完美？双11结束了，大家已经无手可剁。天猫官方公布了今年的双11成交额为2684亿元，成功刷新了自己创下的商业纪录。按理说大家已经习惯了逐年增长，没想到由于过于完美，引发网友提出质疑。滑动图片浏览 or 点击查看大图▼该微博在天猫公布2019年销售额后，引发大量讨论，成功登上热搜。一

↑关注置顶 有趣的不像个技术号是否真的完美？双11结束了，大家已经无手可剁。天猫官方公布了今年的双11成交额为2684亿元，成

大家好，我是小五🚀经常有朋友问我一个问题，转行数据分析师应该先学什么呀？抛开统计学、业务方法论，单拿出技能工具来说的话，我更希望大家先学习SQL。为了证实我的看法，我爬取了招聘网站，并做了一张柱状图来展示互联网公司对数据分析师的技能要求。可以看到对于一名（准）数据分析师来说，SQL确实是最需要掌握的技能。当然，大家对于各种工具也不必追求全部掌握，它们的目的都

hello，小伙伴们，大家好，今天给大家分享的开源项目是：weiboSpider，看名字也可以猜到这个项目是做什么的了！没错，这个开源项目就是采集新浪微博一个或多个用户（如：胡歌、迪丽热巴、郭碧婷）数据，并将结果信息写入文件或数据库，写入信息几乎包括用户微博的所有数据，包括用户信息和微博信息两大类。这个开源项目需设置cookie来获取微博访问权限，后面会

代码如下：coding:utf8importparamikoimportreimportosfromtimeimportsleep定义一个类，表示一台远端linux主机参考https://www.cnblogs.com/haigege/

首先选择选用的数据库，（本人选用django（1.11.8版本））在主项目settings中操作如下：DATABASES{'default':{'ENGINE':'django.db.backends.mysql','NAME':'fruitday',

公众号关注“杰哥的IT之旅”，选择“星标”，重磅干货，第一时间送达！

sqlite3连接fopen('config.ini','r',encoding'utf8')读取当前目录下文件。打开数据库的文件路径保存在config.inilinesf.readlines()读取所有行。默认每行最后一个为回车符，后面需要处理掉fir