宝贝我爱你 Good Luck To You!

股票热度分析

通过股吧、雪球等平台,抓取各个股票的发帖以及回复数量,形成股票热度。

通过python的开源框架pyspider进行定时脚本的批量抓取。

难度系数:4星

知识点:

1:从头开始掌握一门新的语言python,包括语法、数据库操作

2、sqlite的入门

3、pyspider框架的学习与应用

4、数据库的存储过程

5、数据库的主从与读写分离

6、性能优化(从50M带宽不间断跑满优化到20M带宽3-5分钟完成任务)

 

作者:johen 分类:技术 浏览:47087 评论:0
留言列表
发表评论
来宾的头像