首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >Django开发之简书推荐作者可视化

Django开发之简书推荐作者可视化

作者头像
Python中文社区
发布于 2018-02-01 02:11:27
发布于 2018-02-01 02:11:27
1.2K0
举报
文章被收录于专栏:Python中文社区Python中文社区

專 欄

罗罗攀Python中文社区专栏作者

专栏地址:

http://www.jianshu.com/u/9104ebf5e177

折腾了几天,终于完成了第一个web开发项目,其中乐趣多多,坑也是巨多,听我娓娓道来。由于本人使用的腾讯学生机(小霸王),请稍作等待,不想等待的小伙伴们,直接看下图:

项目概述 本项目结合数据的采集、预处理、存储、使用等技术,利用Python语言实现功能,展示了简书推荐作者相应的统计信息,本人的信息以及推荐作者的查询功能。

项目知识点 scrapy 利用scrapy框架进行数据的爬虫及预处理,由于侧重点是web开发,这里只是爬取了用户的个人信息,文章等信息没有做爬取。 mysql 该项目使用mysql进行数据的存储,同时通过mysql数据库完成前后端的数据交互。 echarts3 数据的可视化使用echarts3,百度良心之作~ Semantic UI 对于css完全小白的我来说,当然要使用框架啦,semantic里面的容器炒鸡好用,不要担心布局难看啦。 Django web开发当然是使用python的Django框架啦。 统计 该web项目总共设计3个界面,由于界面的上下结构一样,这就要使用模板的继承。 首先可视化了用户的类型和性别分布 地区分布

这里简书没有用户的地址信息,但有些用户挂了微博,我通过进入微博爬取的数据。这里微博的数据要使用正则,然后加请求头。总共才30多个数据,居住在上海的就有9个~ 用户排名 这里使用了粉丝排名和文章数进行排名。简书一哥彭小六位居第三,而文章数排第一的是Sir电影,1514篇,6的飞起。 罗罗攀 第二个界面是我自己的界面。 卡片 这里使用semantic制作了一个小卡片,个人非常喜欢。

热门文章 多半都是与简书相关的一些爬虫文章。 写作时间可视化 最后弄了2个折线图,看看我都是什么时候更文的~ 搜索 最后通过form表单的post功能,完成搜索功能,用手机可能无法实现搜索,请用电脑使用。

总结 界面我还是比较喜欢的,粉丝的背景和一个笔记本,与简书很配。 感谢故人兄、亮亮同学、程程同学们的帮助。 还有许多不足,请多多批评指正。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2017-08-28,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Python中文社区 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
Django开发之简书推荐作者可视化
折腾了几天,终于完成了第一个web开发项目,其中乐趣多多,坑也是巨多,听我娓娓道来之前,按例给大家上网站链接:
罗罗攀
2018/08/28
5440
Django开发之简书推荐作者可视化
我的简书两月记:数据可视化
很多人来简书写作,或长或久,可能无法准确量化自己取得的进步,或者无法定位自己在几十万乃至更多的写作者中所处的位子,比如:有多少人粉丝数、喜欢数比你多?万粉大小V的有多少人?老是看到的“签约作者”这一群体有多少人?他们用了多久取得现在的成绩......
古柳_DesertsX
2018/08/21
4450
我的简书两月记:数据可视化
Scrapy数据爬取,Django+PyEcharts实现可视化大屏(附源码)
https://github.com/ChenZixinn/scenery_spider_web
小F
2023/08/21
7680
Scrapy数据爬取,Django+PyEcharts实现可视化大屏(附源码)
怎样成为知乎大V?爬取张佳玮138w+知乎关注者:数据可视化
作者:Deserts_X 用python爬虫玩点好玩的;用可视化看见不一样的内容。 个人公众号: 牛衣古柳(ID:Deserts-X) 简书:http://www.jianshu.com/u/105b6cd74e7e 一、前言 作为简书上第一篇文章,先介绍下小背景,即为什么爬知乎第一大V张公子的138w+关注者信息? 其实之前也写过不少小爬虫,按照网上各种教程实例去练手,“不可避免”的爬过妹子图、爬过豆瓣Top250电影等等;也基于自身的想法,在浙大120周年校庆前,听闻北美帝国大厦首次
小小科
2018/05/02
1.2K0
怎样成为知乎大V?爬取张佳玮138w+知乎关注者:数据可视化
知乎上值得关注的Python大佬
萌新整理了知乎上值得关注的Python大佬,来看看吧~ 综合类 @xlzd 比较全能的Python大牛,精通爬虫、后端 @廖雪峰 这个,相信大家都看过老师的入门教程 @Crossin Crossin的编程教室创始人,帮助很多人入门Python @Coldwings 搞科研的就是不一样 @灵剑 已回答2166问题,擅长的不仅是Python @何明科 数据冰山专栏的作者,文章质量没话说 @leoxin 每天更新公众号菜鸟学python ,作为工作党不容易啊 @刘志军 写过Python各方面,混迹各大圈子 爬虫类
小歪
2018/04/04
1.2K0
我的简书一月记:数据可视化
截止前天,来简书正好一个月。20170730 注册了账号,当晚发布处女作《爬取张佳玮138w+知乎关注者:数据可视化》,从而开启了《python爬虫和数据可视化》系列的写作。
古柳_DesertsX
2018/08/21
4840
我的简书一月记:数据可视化
爬取简书26万+用户信息:数据可视化
简书上有哪些优质用户?有多少大V粉丝数上万,获赞数上万?小透明的自己能排到多少位?大V之间相互关注情况如何?签约作者有多少人......
古柳_DesertsX
2018/08/21
7700
爬取简书26万+用户信息:数据可视化
简书=鸡汤?爬取今日看点数据:1916篇简书热门文章可视化
最近写得两篇关于简书的数据可视化文章:《简书推荐作者风云榜(爬取简书app数据)》、《我的简书一月记:数据可视化》反响都还不错,因而将继续针对简书进行数据分析和可视化。鉴于此前爬取手机app效率较低,本次重新回归网页数据的爬取。
古柳_DesertsX
2018/08/21
4380
简书=鸡汤?爬取今日看点数据:1916篇简书热门文章可视化
就叫Spyfari吧!|数据爬取及可视化系列
这是《数据爬取及可视化系列》的第四篇文章。 前3篇文章,可以查阅: 01基于位置的用户画像初探 02技能之谷歌Chrome爬虫 03 使用Echarts制作可视化图表 ---- 玩了一个月的elect
mixlab
2018/04/17
9821
就叫Spyfari吧!|数据爬取及可视化系列
简书推荐作者风云榜(爬取简书app数据)
自处女作《爬取张佳玮138w+知乎关注者:数据可视化》一文分布后,来简书快一个月了。但一直不怎么熟悉这个平台,因此,这回爬取简书app里的推荐作者并进行简单可视化,以增进对简书的了解。
古柳_DesertsX
2018/08/21
7950
简书推荐作者风云榜(爬取简书app数据)
Python基础进阶需要掌握哪些知识点?
Python基础进阶需要掌握哪些知识点?Python将是每个程序员的标配,有编程基础再掌握Python语言对于日后的升职加薪更有利。Python语言简洁利于理解,语法上相对容易能够让开发者更专注于业务逻辑的实现。
python学习教程
2020/09/07
4580
爬取老树画画全部微博数据:三千诗与画
本次用fiddler抓包移动端(ipad)微博,再用python爬虫获取老树画画微博几乎全部内容。因为老树画画发布的微博结构较为简单,几乎都是:一幅画,配上一段文字,所以在忽略转发内容后,获取画作、诗、发布时间、转发数、评论数、点赞数等内容,共计3395条数据。再用PIL库拼接图片,并用Echarts进行数据可视化。
古柳_DesertsX
2018/08/21
1.1K0
爬取老树画画全部微博数据:三千诗与画
开心二则:公众号开通原创与可视化神器RAW
今天有几件开心的小事,故简单地和大家分享下。第一则算是个小广告,就不投稿了,估计也没人会看到,应该没什么坏影响吧。
古柳_DesertsX
2018/08/21
4320
开心二则:公众号开通原创与可视化神器RAW
图表太丑怎么破,ECharts神器带你飞!
在本专栏或文集中,我曾多次使用ECharts绘制图表、进行可视化,也渐渐积累了30多个实例,本文对此前用过的所有图表和代码进行整理并分享,以给想绘制精美图表的人一点绵薄的帮助。其中全部实例已上传ECharts3官网的个人主页,如果觉得网页上一个个代码查看太麻烦,可以看评论区,去某号后台自取,全部代码和原图轻松到手,妈妈再也不用担心你的图丑破天际了,(逃)。
古柳_DesertsX
2018/08/21
1.8K0
图表太丑怎么破,ECharts神器带你飞!
数据分析与可视化项目技术参考
一般来说这部分的考核主要是,考察你们的Python 爬虫(在没有数据的情况下)、Python pandas 基础数据分析、matplotlib 绘制直方图、饼状图、散点图和误差线图等多种图形,我总结了一下:
秋名山码神
2023/10/16
3440
数据分析与可视化项目技术参考
python进阶学习路线(全)
4、基本数据类型,基本二,字符串,列表,元组,字典,集合
py3study
2020/01/10
3.5K0
数据可视化实践之美
开篇主要是介绍了一些常用的数据可视化工具和图表,让各位看官对数据可视化有一个较为全面的认识。后续篇章会深入介绍如何运用工具绘制精美图表的技术细节。 随着DT时代的到来,传统的统计图表很难对复杂数据进行直观地展示。这几年数据可视化作为一个新研究领域也变得越来越火。成功的可视化,如果做得漂亮,虽表面简单却富含深意,可以让观测者一眼就能洞察事实并产生新的理解。可视化(visualization)和可视效果(visual)两个词是等价的,表示所有结构化的信息表现方式,包括图形、图表、示意图、地图、故事情节图以及
小莹莹
2018/04/24
1.8K0
数据可视化实践之美
房价预测可视化项目
对于数据挖掘工程师来说,有时候需要抓取地理位置信息,比如统计房子周边基础设施信息,比如医院、公交车站、写字楼、地铁站、商场等,一般的爬虫可以采用python脚本爬取,有很多成型的框架如scrapy,但是想要爬百度地图就必须遵循它的JavaScript Api,那么肯定需要自己写JavaScript脚本与百度API进行交互,问题是:这种交互下来的数据如何储存(直接写进文本or使用sql数据库?),如何自动化这种交互方式。
机器学习AI算法工程
2019/10/28
1.5K0
房价预测可视化项目
03 使用Echarts制作可视化图表 |数据爬取及可视化系列
这是《数据爬取及可视化系列》的第三篇文章。 前2篇文章,可以查阅: 01基于位置的用户画像初探 02技能之谷歌Chrome爬虫 ---- 最近在结合新学的爬虫在做一些可视化的东西了,今天讲讲可视化图
mixlab
2018/04/17
1.4K0
03 使用Echarts制作可视化图表 |数据爬取及可视化系列
最全Python爬虫:微信、知乎、豆瓣,一次“偷”个够!
WechatSogou [1]– 微信公众号爬虫。基于搜狗微信搜索的微信公众号爬虫接口,可以扩展成基于搜狗搜索的爬虫,返回结果是列表,每一项均是公众号具体信息字典。 DouBanSpider [2]– 豆瓣读书爬虫。可以爬下豆瓣读书标签下的所有图书,按评分排名依次存储,存储到Excel中,可方便大家筛选搜罗,比如筛选评价人数>1000的高分书籍;可依据不同的主题存储到Excel不同的Sheet ,采用User Agent伪装为浏览器进行爬取,并加入随机延时来更好的模仿浏览器行为,避免爬虫被封。 zhihu_
BestSDK
2018/03/01
4K0
推荐阅读
相关推荐
Django开发之简书推荐作者可视化
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档