- [SinaSpider][1] - 基于scrapy和redis的分布式微博爬虫。SinaSpider主要爬取新浪微博的个人信息、微博数据、关注和粉丝。数据库设置Information、Tweet
前面介绍过多线程的基本概念，理解了这些基本概念，掌握python多线程编程就比较容易了。 在开始之前，首先要了解一下python对多线程的支持。 虚拟机层面 Python虚拟机使用GIL（Global Interpreter Lock，全局解释器锁）来互斥线程对共享资源的访问，暂时无法利用多处理器的优势。 语言层面 在语言层面，Python对多线程提供了很好的支持，Python中多线程相关的模块包括：thread，threading，Queue。可以方便地支持创建线程、互斥锁、信号量、同步等特性。 th
首先需要获取目标用户的oid。进入目标用户主页，按F12打开控制台，在Element页按Ctrl+F打开搜索栏，输入oid即可，然后将oid填入get_weibo.py
大数据与人工智能时代，掌握Python基础后，我们可以选择数据分析方向、人工智能方向、全栈开发方向... 如果想要追赶 Python 的热潮，应该如何学习呢？除了自学之外，多数人都会选择在线课程作为辅
静态文件的打包：静态文件包括图片，视频等静态的文件 MANIFEST.in include 如果要打包静态文件，定义MANIFEST.in配置文件
SOHO中国董事长、地产大亨潘石屹，56岁生日当天发布微博宣布进军编程语言Python。
Gevent官网文档地址：http://www.gevent.org/contents.html 基本概念 我们通常所说的协程Coroutine其实是corporate routine的缩写，直接翻译
软件架构的进化 什么是软件架构？ 软件架构是在软件的内部，经过综合各种因素的考量 、权衡，选择特定的技术，将系统划分成不同的部分并使这些部分相互分工，彼此协作，为用户提供需要的价值 哪些因素？ 业务需求 技术栈 成本 组织架构 可扩展性 可维护性 什么是单体架构 定义：功能、业务集中在一个发布包你，部署运行在一个进程中。 单体架构优势 易于开发 易于测试 易于部署 易于水平伸缩 单体架构面临的挑战 代码膨胀，难以维护 构建、部署成本大 新手上手困难 创新困难 可扩展性差 综上所述 单体架构已经ou
关注本公众号“Python小屋”，通过菜单“最新资源”==>“历史文章”可以快速查看分专题的800篇技术文章列表（可根据关键字在页面上搜索感兴趣的文章），通过“最新资源”==>“微课专区”可以免费观看300节Python微课，通过“最新资源”==>“培训动态”可以查看近期Python培训安排，通过“最新资源”==>“教学资源”可以查看Python教学资源。
Python圣诞学习狂欢夜 距离开始还有3天 . . . 详情 . . . 生成器和协程的介绍 生成器(Generator)的本质和特点 生成器 是 可以生成一定序列的函数。 函数可以调用next()方法。 生成器的例子： 例子1: follow.py 可以使用生成器完成 tail -f 的功能，也就是跟踪输出的功能。 例子2： 生成器用作程序管道（类似unix pipe） 标注：unix管道一个uinx管道是由标准流链接在一起的一系列流程. pipeline.py 理解pipeline.py 在p
作为Python老司机来说，这样的库不要太多了，从地图绘制到算法优化、从调试工具到代码分析，python的生态里有大量的库资源可以给Pythoner使用
Locust是一个容易使用、分布式的压力测试工具。它是用于网站压力测试(或其它系统)并找出多少用户一个系统可以承载。
给定若干视频文件，为其批量添加三层弹幕，要求弹幕文字嵌入到原始画面下方，不遮挡原始画面中的有效内容。假设原始画面中主要背景色为白色。
Thread, Lock, Rlock, Condition, [Bounded]Semaphore, Event, Timer, local。
2014年，Uber发展迅速，其平台在第一季度由原来的60座城市发展到100座，后又在第三季度拓展到200座。同时，发展最快的城市也包含在第一批发展的城市当中。 随着越来越多平台工程师的加入，新的代码
GoPUP 支持Python 3.7+，旨在使获取数据尽可能方便，主要用于学术研究目的。
一 : 科普一分钟 尽管进程间是独立存在的,不能相互访问彼此的数据,但是在python中却存在进程间的通信方法,来帮助我们可以利用多核CPU也能共享数据. 对于多线程其实也是存在一些缺点的,不是任何场景我们都用多线程来完成并发处理任务,因为CPU操作线程,所以线程多了,对于计算机的资源消耗是十分严重的,多线程适合IO操作密集的任务,那么怎么办呢, 协程的出现帮我们解决了这个问题 ,协程是比线程更小的一个单位,但是它的作用却不容忽视. 二 : 多进程 1.多进程简单了解 : 进程之间是独立的,
Tips： 初看这个标题,相信很多同学都笑了,python有性能可言么,呵呵哒...确实哦,python其实就是为了快速开发应用而出生的,虽然python的服务都以性能低而闻名全世界,但是总该有优化的地方吧,呵呵哒.... 这不,这两天本作者就碰见了这样一个问题,首先自我介绍下,我是干嘛的,肯定是屌丝程序员了,这个猜都不用猜,要不然也不会蛋疼的写这篇文章了,我们组是基础开发组,就是专门开发一些剥离业务的组件让其他部门去用,比如业务监控,业务报警,服务数据采集等等一堆搬砖的活.好了,废话不多说了,估计看到这的
初看这个标题,相信很多同学都笑了,python有性能可言么,呵呵哒...确实哦,python其实就是为了快速开发应用而出生的,虽然python的服务都以性能低而闻名全世界,但是总该有优化的地方吧,呵呵哒.... 这不,这两天本作者就碰见了这样一个问题,首先自我介绍下,我是干嘛的,肯定是屌丝程序员了,这个猜都不用猜,要不然也不会蛋疼的写这篇文章了,我们组是基础开发组,就是专门开发一些剥离业务的组件让其他部门去用,比如业务监控,业务报警,服务数据采集等等一堆搬砖的活.好了,废话不多说了,估计看到这的也都看烦了
F-Stack是一个全用户态（kernel bypass）的高性能的网络接入开发包，基于DPDK、FreeBSD协议栈、微线程接口等，适用于各种需要网络接入的业务，用户只需要关注业务逻辑，简单的接入F-Stack即可实现高性能的网络服务器。 本文介绍F-Stack的详细架构及如何解决内核协议栈面临的问题。 传统内核协议栈的性能瓶颈 在传统的内核协议栈中，网络包处理存在诸多瓶颈，严重影响网络包的收发性能。性能瓶颈主要包括以下几个方面 局部性失效 - 一个数据包的处理可能跨多个CPU核心、缓存失效、NUM
2014 年，Python 实现 Pyston 诞生。Pyston 的开发目标是开发高性能 Python 实现，使 Python 跻身 C++ 等传统系统级语言主导的领域。
协程拥有自己的寄存器上下文和栈。协程调度切换时，将寄存器上下文和栈保存到其他地方，在切回来的时候，恢复先前保存的寄存器上下文和栈。因此：协程能保留上一次调用时的状态（即所有局部状态的一个特定组合），每次过程重入时，就相当于进入上一次调用的状态，换种说法：进入上一次离开时所处逻辑流的位置。线程的切换，会保存到CPU的寄存器里。 CPU感觉不到协程的存在，协程是用户自己控制的。之前通过yield做的生产者消费者模型，就是协程，在单线程下实现并发效果。
利用云服务器的高性能,可以方便录制任意抖音直播或m3u8视频内容。可以考虑在推送到企微或者切片发送到微信。
如果仅用Python来处理数据、爬虫、数据分析或者自动化脚本、机器学习等，建议使用Python基础环境+jupyter即可，安装使用参考Windows/Mac 安装、使用Python环境+jupyter notebook
python爬虫，微博爬虫，需要知晓微博用户id号，能够通过抓取微博用户主页内容来获取用户发表的内容，时间，点赞数，转发数等数据，当然以上都是本渣渣结合网上代码抄抄改改获取的！
需要先对 IO 的概念有一定的认识: IO在计算机中指Input/Output，也就是输入和输出。
我们有的理由怀疑自己的主机早被感染了恶意程序。大部分人都是采用重打包后的镜像来安装的盗版系统；用的不知从哪儿下回来的工具激活的系统；平常在网上下载的工具奉行的都是能用就行的原则。而我们也都抱着侥幸心理——大家都在用，应该没问题，大不了装了杀软再扫一遍。何况，杀软都没检查出来，这让我们也很无奈啊，还有什么办法呢？带着这样的问题，笔者细细琢磨了下，并依照自己的想法做了一个有趣的实验。
最近关注的有点杂，所以也挺久没更新博客了。这一篇主要讨论这些技术：WSGI、py3k、werkzeug、asyncio、uWSGI、nginx。
前段时间，公司上线了一个“大屏”项目，用于对接展示一些业务平台的数据。但是在上线后使用过程中，产品或业务经常反馈前台页面没有数据。出现这种情况后，开发人员会去排查问题，解决后再通知产品或业务人员解决修复情况。虽然研发每次都能在较短的时间内响应并解决问题，但运行一段时间后又会反复出现，也给用户造成了极其不好的使用体验。而本文则是基于“测试右移”思想，开展的一次后台服务监控告警的实践记录总结，整个实践过程可以分为：
Python语言在操作系统的内置接口，被称为Shell工具。Python程序可以搜索文件和目录树、可以运行其他的应有程序或是用进程或线程进行并行处理。Python标准库绑定了POSIX 以及其他常规操作系统工具。所以环境变量、管道、进程、多线程、文件、套接字、python正则表达式模式匹配、命令行参数、标准流接口、Shell 命令启动器、file扩展等。除此之外很多Python 的系统工具设计时都考虑了其可移植性。
https://www.cnblogs.com/poloyy/category/1690628.html
创造一个小游戏，让你能够像调皮的侦探一样寻找随机数字的线索。通过命令行输入猜测的数字，并根据反馈逐步靠近答案。在这个项目中，你不仅将学会处理用户输入和条件语句，还能够品味成功的喜悦，仿佛解开了一个谜题。
ROS(Robot Operating System)是一个适用于机器人的开源的元操作系统。它提供了操作系统应有的服务，包括硬件抽象，底层设备控制，常用函数的实现，进程间消息传递，以及包管理。它也提供用于获取、编译、编写、和跨计算机运行代码所需的工具和库函数。
2017年就要过完了，我们来总结一下2017年最好用的17个Python Web框架 群内不定时分享干货，包括2017最新的python企业案例学习资料和零基础入门教程，欢迎初学和进阶中的小伙伴入群学习交流 Django Django的主要原则是在时间上发展任何复杂的东西。它最初是为内容管理系统开发的，但其丰富的功能（包括但不限于模板，自动数据库生成，数据库访问层，自动管理界面生成）非常适合其他类型的Web应用程序。提供用于开发的Web服务器。形成序列化和验证，具有模板继承的模板系统，以多种方式缓存，国
引用计数 原理：当一个对象的引用被创建或者复制时，对象的引用计数加1；当一个对象的引用被销毁时，对象的引用计数减1，当对象的引用计数减少为0时，就意味着对象已经再没有被使用了，可以将其内存释放掉。
距离上次微博超级爬虫更新已经过去三个月了，很多人以为我放弃这个项目了，实际上我太忙（难）了。
在上一篇文章中，我们已经为大家介绍了什么是Locust，具体可参照：性能专题：Locust工具实战之开篇哲学三问，简单来说，Locust 是基于 Python 语言下的一个性能测试库，如果要想使用它来做性能测试必须要先安装 Python。
学习操作系统知识时，进程是必然绕不开的一个概念。什么是进程呢？简单来说，进程是程序的一个运行实例，是正在运行程序的一种抽象。比如当你打开游戏时，操作系统中就会创建一个游戏进程，当退出游戏时，对应进程也会终止。
Event Loop，事件环，线程进程。这些概念对初识前端的同学来说可能会一头雾水。而且运行js代码的运行环境除了浏览器还有node。因此不同环境处理Event Loop又变得不同，十分容易混淆。如果你有这样的疑问。下文将给你一个清晰的解释。
作者 | juanjolainez 译者 | 王强 策划 | 蔡芳芳 本文最初发布于 Medium 网站，经原作者授权由 InfoQ 中文站翻译并分享。 实现微服务时，后台进程是最容易被忽略的元素，而绝大多数应用程序都需要后台进程。 微服务领域的大多数参考书目都着重于如何拆分单体、领域驱动设计、编排与同步、如何拆分数据库等。但人们往往不会提到后台进程，以及如何在微服务架构环境中实现它们。 关于这一点，我会推荐 Sam Newman 的《构建微服务》和《从单体到微服务》两本书，其中涵盖了上面的几乎所有内容，当
第一章、项目介绍 1.1.前言 本教程我将带领大家如何使用flask框架开发微电影网站。Flask是python中最受欢迎的轻量级web框架，flask扩展丰富，冗余度小，可自由选择组合各种插件，性能优越。 相比其他web框架十分轻量级，其优雅的设计哲学，易于学习掌握。小型项目快速开发，大型项目毫无压力。由于flask灵活开发的特点,python高手都会青睐flask,正基于 此，它被许多公司应用在项目开发中，成为很多创业公司以及个人创业者门追捧的web开发框架，本教程主要使用fl
作为一个需要在电脑上工作和学习的人，一件十分困扰我的事情就是怎样不受互联网中其他内容的干扰而专注于自己想要做的事情，有的时候真的是沉浸于微博上的消息，忘了自己本来想要做的事。不过我有一件神器，自己爱豆的音频激励，所以决定写一个python脚本，让电脑每小时定时播放，提醒自己专注学习。
在本指南中，我们将使用CentOS 7上的Flask微框架设置一个简单的Python应用程序。本文的大部分内容将是关于如何设置Gunicorn应用程序服务器以启动应用程序和Nginx作为前端结束反向代理。
在本指南中，我们将使用CentOS 7上的Flask微框架设置一个简单的Python应用程序。本文的大部分内容将是关于如何设置uWSGI应用程序服务器以启动应用程序和Nginx作为前端结束反向代理。
用 Python 做到每秒处理上百万次 HTTP 请求，可能吗？也许不能，但直到最近，这已成为现实。
从开始做前端到目前为止，陆续看了很多帖子讲JS运行机制，看过不久就忘了，还是自己理一遍好些
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
