这周看到了两个地震新闻，一个是广东广州增城的，另一个是台湾的，因为本人身在广州，而且对于广佛这边的来说地震其实挺突然的对于我们来说，基本在广佛这边很少出现地震，所以我看到广州增城地震也挺吃惊，然后就萌生了爬取地震数据的想法，想了解一下地震高发地。
作者： CarterLi 原文：https://segmentfault.com/a/1190000012730162 上篇说了一些 JS 中数组操作的常见误区，这次来总结一下初学者常见的其他易错点。 写立即执行函数时前置 void 立即执行函数（IIFE）在 JS 非常常用，作用就是构造一个函数级的变量作用域。常见的写法如下： 这样写可能会被 JS 理解成为一个函数调用 从今天改变习惯，这样写： 有些人喜欢以 打头，个人习惯问题。 在 standardjs 规范日益流行的今天，忽略行尾分号成为了主流（但
昨天的文章《我用 Python 预测了股票价格》中就提了一嘴，最近爬了一些股票和基金数据。
作者： CarterLi 原文：https://segmentfault.com/a/1190000012730162 上篇说了一些 JS 中数组操作的常见误区，这次来总结一下初学者常见的其他易错点。 写立即执行函数时前置 void 立即执行函数（IIFE）在 JS 非常常用，作用就是构造一个函数级的变量作用域。常见的写法如下： (function () { // code })(); 这样写可能会被 JS 理解成为一个函数调用 var a = 1 (function () { // Uncaught
上述就可实现网站计时功能，结合数组函数实现，后续可是使用js获取倒计时，时时显示！
在2015年初我们创建了一个微服务，它只做一件事（也确实做得很好）就是地理围栏查询。一年后它成了Uber高频查询（QPS）服务，本次要讲的故事就是我们为什么创建这个服务，以及编程语言新秀Go如何帮我们
分享前一段我的python面试简历，自我介绍这些根据你自己的来写就行，这里着重分享下我的项目经验、公司职责情况（时间倒序），不一定对每个人适用，但是有适合你的点可以借鉴
出于对开发效率和动态化的要求，无线端的开发框架也一直在更新，从 Hybrid、结构化 Native View、React Native、Weex，再到现在正在大受关注的 Flutter。什么样的框架才是适合自己的团队？不仅要有技术追求，而且要考虑实际业务需要。最近，有赞移动选择了 weex 作为无线开发框架，搭建了从开发、Debug、构建、发布、数据一个闭环的流程。本文将对此进行分享。
点击上方蓝字“ITester软件测试小栈“关注我，每周一、三、五早上 09:00准时推送，每月不定期赠送技术书籍。
在写了七篇爬虫基础文章之后，终于写到心心念念的Scrapy了。Scrapy开启了爬虫2.0的时代，让爬虫以一种崭新的形式呈现在开发者面前。
温馨提醒：本文有点长，5000+字数，可耐心阅读或收藏有空再看。写作花了很多时间，欢迎转发、点赞、留言，多多捧场，古柳也有动力持续创作。对文章任何内容有疑问欢迎可视化群里交流。PS：堀未央奈，毕业快乐！文章剩最后一节没写时，突然看到谁都没料到的乃木坂46成员宣布毕业，被击沉懵了，再也写不下去，很久缓过来后才写完，有了这么个插曲，记录一笔。
近日 Node.js 官方 Twitter 上转载了一则帖子，看来国外也有此讨论。Node.js TSC 成员 & fastifyjs 首席维护者 @Matteo Collina 对此进行了回复，表示关于 Node.js 衰退的传言被大大夸大了。Node.js 不仅不会消失，而且正在积极进化以满足现代 Web 开发的需求。
原文：https://blog.rafaelgss.dev/nodejs-2023-year-in-review
Chrome 最近在Chrome UX 报告报告中引入了一个新的实验性响应指标。这个指标，我们现在称为INP（Interaction to Next Paint），用于衡量对页面上用户交互的整体响应能力。今天，我们想分享关于使用现代 JavaScript 框架构建的网站与该指标关系的见解。我们想讨论 INP 为何与框架相关，以及Aurora和框架如何努力优化INP指标与响应能力。
React 发布已经十年了，笔者接触前端差不多也有十年时间了。说实话，如果没有 Head First 系列图书，我可能都没有走上编程这条道路。
本来想参照：https://mp.weixin.qq.com/s/e7Wd7aEatcLFGgJUDkg-EQ搞一个往年编程语言动态图的，奈何找不到数据，有数据来源的欢迎在评论区留言。
php中的时间戳与javascript中的时间戳的比较，本质上看，它们是一样的东西，但如果二者要进行相等比较的时候，还是有点不同的，稍不注意,就会误入歧途，所以，这里列出容易忽略的两点不同，供大家参考：
2016 年 10 月 18 日，Node.js v6 LTS (Boron) 发布，这也是 Node.js 启用 LTS 发布计划以来，第一次同时迎来两个 active LTS(v4 与 v6）。这系列文章将讲述 Node.js v6 LTS 带来的一系列变化，本篇主要围绕 LTS 展开。如果读者还对 Node.js LTS 的发布流程不了解，可以先阅读本篇，否则可以直接跳过阅读下一篇关于 Node.js Core 的变动。
摘要： 现在很多网页都采取JavaScript进行动态渲染，其中包括Ajax技术。有的网页虽然也用Ajax技术，但接口参数可能是加密的无法直接获得，比如淘宝；有的动态网页也采用JavaScript，但不是Ajax技术，比如Echarts官网。所以，当遇到这两类网页时，需要新的采取新的方法，这其中包括干脆、直接、好用的的Selenium大法。东方财富网的财务报表网页也是通过JavaScript动态加载的，本文利用Selenium方法爬取该网站上市公司的财务报表数据。
所以我们加上了判断语句，当然细心的小伙伴应该可以看到我们这里还会构造出2019年的链接，这个错误链接我们在后面获取数据的时候会进行处理，若链接是没用的，我们选择不处理，直接pass。
前面两种对象是JS基础内存，属于ECMAScript，第三种浏览器对象属于我们JS独有的。
本篇我们要进行的是12306火车车次信息的爬取分析。都说12306是目前反爬措施最强的网站，的确如此。博主于2017年专门研究过如何爬取并进行了购票分析，费了很大功夫终于成功地抢到了票，但是很不幸，没过多久12306就进行了大改版，写过的爬虫代码几乎成为了摆设。这里只是爬取车次信息，并不进行购票操作，后续可能会出专门的教程介绍这一块，本篇文章的重点不在于此。
树莓派自2015年开始是默认就带NODE-RED的，但是如今已是2018年：）自带的版本已经很老了，可通过下面的命令进行自动升级NODE.JS和NODE-RED
函数的性能测试的一般方法 全栈A同学： 2020年要学习好多新东西，大家都在说优化，提高性能，如何入手？😶 有多个方法可以实现一个函数，到底用那种更好？ 是否可以总结一些性能改变上的技巧？ 2020年我们如何关注性能优化？😶 Sky：我们从构建一个通用的benchmark（性能基准测试）方法开始，切入点要小💥此方法我们希望做到以下几点 自动运行某函数多次 确定它每毫秒的执行次数 ops/ms，超过1000/ms是较优质的函数 确定它每次执行需要多少毫秒timeSpend/ms 确定它的执行稳定性，多次运行后
一、先说整体的解决方案 1、通过搜狗进行公众号文章的采集，这样获取到的文章URL是一个带时间戳的临时链接。 2、通过安卓模拟器＋Anyproxy代理抓包分析微信客户端打开临时链接时与其服务器请求的协议内容，得出永久链接。 3、通过按键精灵模拟或Python脚本在微信号上发送临时链接内容，只有在安卓模拟器上的微信号上发送了内容，Anyproxy代理才能抓取到相关的包内容。 二、再说具体的解决方案，主要是第2点 1、通过搜狗进行公众号文章的采集，这样获取到的文章URL是一个带时间戳的临时链接。在用这个做数据采集
本文介绍如何利用requests+正则表达式爬取TIOBE编程语言热度数据，并使用?openpyxl写入数据与?pyecharts时间轮播图进行可视化。 一、数据获取 我们需要爬取的目标url为ht
本文对瓜子网杭州二手车进行了爬取和简单分析，一方面是为了进一步熟练使用Python的Scrapy爬虫框架，另一方面是为了熟悉Tableau强大的数据可视化功能。
6 月 26 号晚上，大量 QQ 被盗的新闻一度冲上微博热搜。很多人反映自己的 QQ 不受控制地发送大量违规图片。
公司在2017年3月的时候开发过一个「数据中心」，是将有赞的用户和订单信息通过API拉取到自己开发的网站上，再结合我们自己和用户沟通的信息，组成一个简单的用户管理中心。数据中心虽然简单，但对我们意义非常大，它的出现标志着我们想要定位一个用户的时候告别了“办公室吼一吼”的纯人肉方法。
weixin_crawler从2018年6月份就开始利用业余时间开发，到今日正式问鼎江湖。在正式介绍weixin_crawler之前，我准备了两个问题，这两个问题通过weixin_crawler自带的报告和搜索指数都能得到回答。
我（信誓旦旦状）：等我爬下携程所有票价信息，以后给我一个预算，我就能跟你说你去到哪儿！
最近喜欢看《火星情报局》，搞笑中也不缺内涵。记得2016年的最后一期，里面说到，年终总结只需一个字，而沈梦辰给自己的是一个黑字，2016的她如此招黑，那今天我爬取她2017年的一篇微博评论，看看2017有什么变化呢？ 提交Cookie信息模拟微博登录 需要爬取登录之后的信息，大家都是望而止步，不要担心，今天呢，给大家提供一个超级简单的方法，就是提交Cookie信息登录微博，首先，我们找到沈梦辰的微博网址：http://m.weibo.cn/u/1732927460 这里是登录的移动端，你会发现，你点
11月初我们发布了1.4.0里程碑稳定版本，增加了一些新功能包括丰富了查询控件、支持查询JS/CSS增强、支持mongodb、redis、存储过程数据集、支持分组小计、支持图表钻取、条件钻取、支持表格背景设置斑马线、支持分栏功能、支持分版功能、支持动态合并格等等；下面就让我们一起来看一下具体的功能吧。
手机和数码相机拍的照片里除了我们能看到的RGB像元数据，还包含了拍摄时间、图像分辨率、感光值、GPS坐标等属性，记录在Exif(Exchangeable image file format)模块里。
js和物联网领域的关系不是很大，为什么要关心js呢？其实关系也不小，它主要是负责直接和用户交互的那部分，也就是前端，前端基本都是离不开js的，甚至有些CS架构的程序也用js，比如nodejs开发的客户端程序。
利用Python爬取豆瓣电影TOP250并进行数据分析，爬取’排名’,‘电影名称’,‘导演’,‘上映年份’,‘制作国家’,‘类型’,‘评分’,‘评价分数’,’短评’等字段。
前几天有粉丝跟我反馈说，某机构的人跟他说学爬虫1个月就能接单，让这小伙子去报名那个机构的爬虫课程，学完之后1个月就能把6000多的学费赚回来。可能是因为我和粉丝的交流比较多，所以小伙子找到了我，问我这个事情的真伪，我不禁咋舌…
正式讨论「跨端开发」这个概念前，我们可以先思考一个问题：对大部分前端工作来说，前端主要干些啥？
在毕业设计中，用Java写下了第一个爬虫。2019年工作之后，从Python的requests原生爬虫库，学到分布式爬虫框架Scrapy，写了60个左右爬虫。然后写了十几篇有关于爬虫的文章。但大多都是围绕着程序设计、功能模块的角度写的，今天就从数据的角度出发，来看看爬虫程序是如何开发的。
📌本文是我在学习多个平台 UI 框架后的一些感触，受精力和技术水平所限，文中定有不足之处，请各位大佬多多指教 如果你觉得我的文章对你有帮助，在收藏的过程中，一定要记得点赞和点在看哦，谢谢你，这对我真的很重要🌟！ 一、前端三板斧 正式讨论「跨端开发」这个概念前，我们可以先思考一个问题：对大部分前端工作来说，前端主要干些啥？ 我个人认为，无论环境怎么变，前端基本上就是做三件事情： Fetch Data、Manage State、Render Page fetch data（数据获取） manage stat
关于登陆 在web上，QQ登陆的时候是将密码加密后再提交了，打开http://xiaoyou.qq.com，找到了密码加密过程在http://imgcache.qq.com/campus/js/Mlogin.js 文件中，通过解读代码可以了解到，QQ一共进行了4次的MD5运算，具体过程如下： 比如登陆填写的密码是aaaaaa，验证码abcd 首先将aaaaaa进行MD5运算，结果再进行两次运算，得到XXXXXXXXXXXXXXXX（16位），然后把验证码转换为大写，与那16位组合成XXXXXXXXXXXXXXXXABCD（20位），再进行一次MD5运算，得到的结果就是加密后的密码了。
Vue-SSR相信大家都不陌生，与传统 SPA 相比，服务器端渲染 (SSR) 能够具备更好的SEO，方便搜索引擎爬虫抓取工具可以直接查看完全渲染的页面，除此之外，SSR能够在更短的时间内渲染出页面内容，通过在服务端填充数据吐出到客户端的方式，让用户有更好的用户体验。 前言 基于VueSSR的页面优化常有，而针对VueSSR的再优化不常有。前段时间有幸作为宇宙无敌上级特派看门员参加了前端tweb大会，听取了腾讯视频Web高级工程师lucien(段隆贤) 分享了针对SSR场景下的一些优化，由于笔者之
三大 JavaScript 主流模块规范：CommonJS、AMD 和 ES6 Module。CommonJS 和 AMD 都未统一浏览器和客户端的模块化规范。目前 Node.js 使用 CommonJS 作为官方的模块解决方案，虽然内置的模块方案促进了 Node.js 的流行，但是也为引入新的 ES Modules（ESM）标准造成了一定的阻碍，不过 Node.js 9.0+ 已经支持 ESM 语法。
Causal 是一个多维电子表格，能够处理从基本算术一直到 10 亿次计算的金融模型的一切。Causal 的前端是在 2019 年用 Create React App（CRA）构建的，它为我们提供了很好的服务——它只需要最小的初始设置，并允许快速迭代。随着我们的客户规模和复杂性的增加，性能变得越来越受到关注，我们达到了 CRA 设计支持的极限。最重要的是，CRA 本身并不支持跨多页应用程序的路由分割，所以我们的页面加载时间慢得令人沮丧。为了解决这些问题，我们改用 Next.js，将初始页面加载时间减少了 70%，并将开发者的体验提升到一个新的水平。
这节要写的是从网站爬取财务报表信息，然后写入自己的数据集中。财务信息有了，接着就可以自己算各个股票的PE市盈率了。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
