首页
学习
活动
专区
圈层
工具
发布

我是如何通过Web爬虫找工作的

那时我不太喜欢社交,因此我决定以我所知道的最佳方法来找工作,即开发一个应用程序,这篇文章就介绍了我是如何做到的。...我的第一个挑战就是如何轻松访问Craigslist的数据。 首先,我查看Craigslist是否有公开的REST API,但令我沮丧的是,并没有。但我找到了不错的替代品。...结果我发现了一个很酷的Python小工具,叫做Beautiful Soup。它能让你解析整个DOM树,并帮助你了解网页的结构。 我的需求很简单:需要一个易于使用的工具,能让我从网页收集数据。...我的工作流程 我准备进行下一个任务:从实际发布贴中爬取邮箱地址。 开源技术的好处在于,它们是免费的,而且性能强大。BeautifulSoup能让你在网页上搜索特定的HTML标记。...(我试图切换V**,但不管用) 仍然无法检索Craigslist上的所有帖子 最后这点让人郁闷,但我认为如果一篇招聘贴发布了一段时间,可能发布者已经没有再招人了,这样也是可以接受的。

1.3K30

Github Copilot 是如何提升我的工作效率?

最近字节的朋友要在公司分享Copilot,但是他们公司当前是禁止使用Copilot的,所以找到了我。正好总结下半年来的使用感受。 减少重复的、逻辑少的工作。...参照本地项目里已有逻辑(不限于当前项目,不限IDE),生成适合当前场景的代码。...例如已经编写普通Url分类功能的代码,在编写安全Url分类代码时,Copilot能自动编写同样的逻辑,并使用安全Url分类相关变量。开发人员只需要修改不同逻辑的那部分代码。...Copilot能学习本地项目函数的逻辑,从而生成更符合开发人员期望功能的代码。 函数名、变量名提示更准确、更全面。 相较于IDE的代码提示,提示内容更多、更符合当前项目的风格。...Copilot能编写基本的测试函数,以及丰富的测试用例,从而更全面的测试代码,提升代码质量。 Post Views: 10

50210
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    我在工作中是如何使用Git的

    本文首发于政采云前端团队博客:我在工作中是如何使用 Git 的 https://www.zoo.team/article/how-to-use-git image.png 前言 最近在网上有个真实发生的案例比较火...Git 的工作区域和流程 要想弄懂 Git 是怎么对我们的代码进行管理的,那首当其冲的是了解 Git 的工作区域是如何构成的。...,我们要把最后的一个提交对象( ac18084 )之前的提交压缩成一次提交,我们需要执行的命令格式是: git rebase -i ac18084 此时会进入一个 vim 的交互式页面,编辑器列出的信息像下列这样...还没开发完成,这个时候,我想切换到 hotfix 分支上修复 bug,得暂停下开发切换到 hotfix 分支,但是现在工作区还有内容,此时如果切换分支 Git 会报出下面的错误 error: Your...,如下图所示,查看前后的状态可知,文件最后成功撤回到工作区了。

    2.6K30

    在这个大环境下我是如何找工作的

    所以我当时的目标是花一个月的时间找一个我觉得靠谱的工作,至少能长期稳定的工作 3 年以上。...不过这点在重庆这个大洼地中很难找到对口工作,所以我的第二目标是技术 leader,或者说是核心主程之类的,毕竟考虑到 3 年后我也 30+ 了,如果能再积累几年的管理经验后续的路会更好走一些。...第一家 首先第一家是一个 ToB 教育行业的公司,大概的背景是在重庆新成立的研发中心,技术栈也是 Go; 我现在还记得最后一轮我问研发负责人当初为啥选 Go,他的回答是: Java 那种臃肿的语言我们首先就不考虑...其中问了一个很具体的问题,我记得好像是 MD5 的具体实现,说实话我不知道,从字里行间我感觉对方的态度并不友好,也就没有必要再聊下去;最后给我说之所以问这些,是因为看了我的博客后觉得我技术实力不错,所以对我期待较高...当然个人待遇是由市场决定的,现在互联网不可否认的降温了,如果你觉得各方面呆在这家公司都比出去再找一个更好,那这也不失为一个方法;除非你有信心能找到一个更好的,那就另说了。

    59020

    我是如何在自学编程9个月后找到工作的

    那时我写了一些代码(也就几百行 Python),感觉不错。我决定靠着积蓄来学习编程,直到找到一份开发的工作。 回顾这个漫长而艰难的旅程,我想分享一些经验,它是如何开始以及如何结束的。...而本文中,我主要针对想要通过学习编程找工作的角度来谈。 2)如果你的目标是找工作,就盯着就业市场看,而不是 Twitter 和 Medium 上的热点。还记得第一点吗?你必须设定一个非常精确的目标。...诸如“我想成为一名开发人员并从事游戏行业”这样的目标就过于模糊。你的首要任务是什么?是寻找一个真实的开发工作,还是在游戏行业工作?如果你在游戏行业找不到工作怎么办?...定义好你的问题,输入,输出以及如何从一个到另一个。整理你的代码,看看你乱七八糟的面条代码,看看你凌乱和命名不佳的函数和变量,超过几百行就难以维护的代码,试着改进它。 9)掌握计算机的基本常识。认真脸。...我们也举过很多例子,公众号Crossin的编程教室里回复关键字 项目) 最后就是你的知识,而且这很重要。如果没人帮你递简历,说你是个优质资源,那知识就是你最后的王牌。

    1.5K30

    ​我是如何将网页性能提升5倍的 — 构建优化篇

    我在 构建、网络、资源加载、运行时、服务端、功能组织等多个方面都进行了优化,准备做一个系列,分章节给大家分享下我的优化经验。 今天,我们从优化效果最为明显的构建角度开始。...CDN 引入 CDN 的工作原理是将源站的资源缓存到位于全球各地的 CDN 节点上,用户请求资源时,就近返回节点上缓存的资源,而不需要每个用户的请求都回您的源站获取,避免网络拥塞、缓解源站压力,保证用户访问资源的速度和体验...不是所有依赖都适合异步加载,如果你对使用该依赖有很高的性能要求,然后依赖本身也比较大,这种情况是不适合的,因为你可能会看到明显的延迟。...以上 export 其实是一个比较合适的场景,下载 excel 本身需要延迟时间,加上动态加载依赖的时间是可接收的。...在某些场景下,语言包会占用整个包体积的非常大一部分。实际上库本身的逻辑不会很大,moment 就是一个很好例子。

    2.6K20

    我是如何成为一个JavaWeb开发者的

    一个完整的全栈开发者应该同样胜任前端开发和后端开发的工作。这可能是难度系数最高的一条路了,因为所涉及得技术非常多样。...于是,HTML不再是静态的文件,HTML开始按需生成。作为一个Javaweb开发者,你得会编写如何为网页浏览器生成HTML文件的代码。你需要对HTML文档的结构有一个深刻的理解。   ...有太多的web开发人员居然对HTTP一无所知。HTTP绝对是你必学的关键技能。尤其是当你要用AJAX工作的时候。你需要知道一个POST和一个GET之间的区别。...在我的Spring入门在线教程上,我对主要的Spring框架项目做了一个很好的概述,并说明了如何使用它们来构建企业级应用程序。   ...如果我现在作为一个Javaweb开发人员入门的话,我会先专注于客户端技术,因为客户端技术独立于服务器端技术。因此,等你入门了以后,你将会有更多的就业选择。

    1.2K10

    我是如何做好一个开发经理的

    如果我要问微信中与我联系的开发经理,“你是一个什么样的开发经理? 我确信,最重要的答案就是:“我知道开发经理,但我不知道开发经理存在不同种类”。...2.连接和协调 通过做好沟通连接者管理方式,开发经理 专注于团队成员建设之间的和睦相处和稳定。 目标是确保团队成员彼此友好相处,以创造一个相对更好的工作环境。...有个故事: 一个少年 完成了高中足球的最后一年。他的高中足球队 整个赛季都在美国十大足球队中排名第一。 事实上,在他们最后的冠军赛中,16个人打破了记录。...当平等主义的方法被很好的地实践时,团队的输出能力到将得到很大的提升,因为他们的想法和观点是 正是需求产出的一部分。 对我而言,这与我在项目工作中管理的感受一致。...一个项目,我可以决定如何设计解决方案,我将用什么工具和技术来解决,以及我完全指定一定的验收标准。 在这种环境下工作,我自己都迫不及待想要立马投入工作,并期待着我的解决方案上会被大家所认同。

    1K10

    我是如何成为一个JavaWeb开发者的

    一个完整的全栈开发者应该同样胜任前端开发和后端开发的工作。这可能是难度系数最高的一条路了,因为所涉及得技术非常多样。...于是,HTML不再是静态的文件,HTML开始按需生成。作为一个Javaweb开发者,你得会编写如何为网页浏览器生成HTML文件的代码。你需要对HTML文档的结构有一个深刻的理解。   ...有太多的web开发人员居然对HTTP一无所知。HTTP绝对是你必学的关键技能。尤其是当你要用AJAX工作的时候。你需要知道一个POST和一个GET之间的区别。...在我的Spring入门在线教程上,我对主要的Spring框架项目做了一个很好的概述,并说明了如何使用它们来构建企业级应用程序。   ...如果我现在作为一个Javaweb开发人员入门的话,我会先专注于客户端技术,因为客户端技术独立于服务器端技术。因此,等你入门了以后,你将会有更多的就业选择。

    1.3K10

    我是如何找到 Google Colaboratory 中的一个 xss 漏洞的

    当我使用 http/https 以外的协议时,这段 HTML 代码不会包含一个链接。另外我注意到,即使这个URL不包含一个正确的域名,这个链接也还是会被生成。...高亮的那一行是验证链接中的 URL 的正则表达式。我仔细看了一下,但找不到任何办法去绕过。虽然我花费一些时间去寻找这个表达式而且绕过不了,但时间并没有被浪费。...是 Google Closure library 的一部分。...总结 最后总结一下,首先我展示了我是如何在 Colaboratory 中识别 XSS,然后通过在 MathJax 依赖库中寻找到了安全问题从而在 DOM 树中注入了我们的恶意代码。...最后,我使用了一个被称为 JS 小技巧来绕过 CSP(内容安全策略)。 目前,MathJax 中的安全问题已经得到了修复。

    2.1K00

    我是如何培养新人的:关于如何制作一个python库?

    我喜欢提出问题给新人去解决,而不会直接把答案告诉他。最近在工作中完成了一些文本分类的算法,涉及到最后的工程化问题,于是我布置了个作业,要求是把代码整理成python,并发布,方便调用。...下面是新人完成的作业,他写了一个简短的指南,分享给大家。...Python包封装流程: 1.创建项目 项目名任意(例:pure) 2.在项目下新建python包,包名任意(例:pure) 3.在python包里须有__init__文件、实例.py文件 例:我的实例...author_email='',    ​​keywords='',    ​​description='A small example package',    ​​license='',    ​​url...把复杂的工作拆解成一步步可以解决的问题,这样离目标就近了~

    99910

    面试官:CPU 是如何工作的?我一脸懵逼。。

    1、CPU的两个主要组成部分 控制单元 — CU 控制单元(CU)是CPU的一部分,它帮助协调指令的执行。它告诉CPU应该做什么。...由于RAM是用于读/写数据的寄存器的集合,因此RAM可以用于存储8位地址的输入、用于存储实际数据的数据输入,和用于储存最后的和锁存器一样工作的读写启用码。...一些处理器提供了提高时钟频率的能力,但由于这是一个物理变化,可能会出现过热,甚至冒烟/起火。 5、指令是如何执行的 指令按顺序存储在随机存取存储器(RAM)上。...但是,如果我们编写的程序有太多的指令,就将导致整体性能的降低。 大O符号(Big O notation)计算方法可以用来确定在给定输入的情况下CPU的性能将如何受到影响。...为了尽可能地提高CPU的速度,很多优化工作已经在CPU中进行。而我们在编写任何程序时,都需要考虑如何尽可能地减少我们提供给CPU的指令数量,以提高计算机程序的性能。 ?

    1.2K40

    我是如何在两天内做完一个网站的

    1、如何购买域名?购买什么域名比较好?域名多少钱? 2、如何租用服务器?国内的服务器和国外的服务器又什么区别? 3、如何绑定域名和IP地址呢? 4、我不会CSS,如何写出漂亮的界面?...4、.com域名的在互联网域名系统是一个顶级域名(TLD) 5、如果做SEO优化,及谷歌广告推广等使用,请使用com域名,cn, info域名,这些域名在搜索中权重较高。...如果你注册一个后缀是xx的域名,别人的一看便是非法网站,就没兴趣浏览了。 二、org域名 1、英文名 organization 2、.org适用于各类组织机构,包括非盈利团体。...国外服务器优点:不需要备案,限制少 国外服务器缺点:速度略慢 如果你由于某些因素,不备案的话,选择国外服务器是不错的选择。 如何绑定域名和IP地址呢?...我不会CSS,如何写出漂亮的界面? 我也不会写css,我推荐 大名鼎鼎的 Bootstrap Bootstrap是Twitter推出的一个开源的用于前端开发的工具包。

    13.2K60

    我是如何做到的:不切换 Git 分支,同时在多个分支上工作的?

    这是解决上述问题的一个方法,但背后同样隐藏很多问题: 多个 repo 的状态是不好同步的,比如没办法快速 cherry-pick, 一个 repo checkout 的分支,另外一个 repo 需要重新...checkout git history/log 是重复的,当项目历史非常长,.git 文件夹下的内容是非常占用磁盘空间的 同一个项目,多个 repo,不易管理 那如何做才能满足这些特殊场景,又不出现这些上述这些问题呢...: 用简单的话来解释 git-worktree 的作用就是: 仅需维护一个 repo,又可以同时在多个 branch 上工作,互不影响 上面红色框线命令有很多,我们常用的其实只有下面这四个:  git... .git 文件夹;要么有 .git 文件,如果只有 .git 文件,里面的内容必须是指向 .git 文件夹的 第二句话感觉挺绕的,下面用例子说明,就很容易明白了 如果您正在学习Spring Cloud...只维护一个 repo,创建多个 worktree,操作间行云流水 我的实践:通常使用 git worktree,我会统一目录结构,比如 feature 目录下存放所有 feature 的worktree

    2.1K20

    程序员自诉:我是如何工作3年在深圳买房的?

    我叫王小飞(化名),经过3年的努力,我住上了深圳的房子。 3年前,我毕业于广州一所211、985重点学校,是计算机科学与技术专业的一名优秀毕业生。因为女朋友来了深圳工作,毕业后我也来了深圳。...不过上班一个多月的时候,我自己意识到,到点下班的时候,居然公司很多人都没有要下班的意思,而且每天都这样,别人用职场经验告诉我,要想在职场上混得好,一定要比别人付出更多的努力。...是的,作为新人,我开始有意识地要在公司好好表现,好让自己在公司有一席之地。从此之后,公司加班到最晚的永远都算上我一个,并且遇到力所能及的事情,我一定会第一个冲上去接下来。...自我感觉非常良好,也让我看清楚了公司的发展瓶颈,这样的小型在线商城,在如此缺乏资源的情况下,短时间内是很难做起来的,对于一名技术人员,如果与创业公司一同成长,就要承担个人技术发展缓慢的弊端,并且遇到个人技术瓶颈等问题...是的,我涨薪了,来这家公司的第二年,公司结合我的年工作贡献、能力、岗位级别等,涨到了15K,福利也比之前的要好很多。

    2.3K110

    我是如何提高工作和研究效率的?分享给大家几个神器

    笔记本接显示器 我感觉这个能极大提高工作效率,使用笔记本电脑的视频接口,接一个24寸以上的显示器,双屏显示的模式推荐用扩展模式。...使用双显示屏让我们自觉将工作内容分开成区块,确实能够在某种程度上提高工作效率。 本文的显示器是Dell的U系列的24寸,用扩展桌面模式。 2.0版本 笔记本屏幕太小,想接两个显示器,怎么接?...我的笔记本是Dell XPS 13的,有雷电3接口(看上去像type-c接口,几乎所有的两年内出品的电脑都带这个接口了),只能再带动一个显示屏。 怎么办?有问题,上知乎,看看别的程序员是怎么弄的。...笔记本只需要接一根线即可 图中的装备:笔记本买了一个立式架子,只需要插上雷电口即可工作了,图中两台显示器一台是AOC 27寸4k的,一台是Dell 24寸1080p的可以旋转的,用扩展坞的显卡带动。...扩展坞通用的,但建议买与笔记本相同牌子的,这样能控制笔记本开关,合上笔记本也可以控制。 可以工作的地方装一个扩展坞,家里放一个,以后只需要带一台笔记本电脑就可以来回工作了,插上一根雷电3的线即可。

    1.8K30

    ⚡️ 一个LED灯的自述:我是如何被5层代码点亮的

    HAL 通常将每个外设抽象为独立的结构体,使开发者能够方便地进行数据传输等操作。如果开发micro:bit v2开发板的嵌入式程序,我们将使用 nRF52-hal。...如果没有这个包,程序就无法启动,因为找不到入口点。接着是panic-halt包。它的作用是在程序发生严重错误时,让系统进入一个安全的停止状态。...如果没有它,我们就无法控制开发板上的任何组件。最后是embedded-hal包,它像是一个通用的翻译器,定义了控制硬件的标准接口。...这个包让我们可以用统一的方式来控制不同的硬件设备。如果删除这些依赖包中的任何一个,我们的代码就会像缺少零件的机器一样无法工作。...为什么仅使用Cargo.toml中的microbit-v2依赖包还不够,还需要embedded-hal依赖包来点亮LED灯?这两个依赖包是如何配合工作的?

    77810

    我是如何得知10W+的访问量多来自工作日的 | 塔秘

    之所以进一步讨论工作日和周末发文对文章访问量的影响,一是觉得很有意思,二是毕业设计与此有很大关系,三是觉得还是有点意义的,于是决定做一下这个工作。...工具 Python 3.5 BeautifulSoup 4.4.1 Requests模块 分析网页 由于之前的工作已知博客园博客展览页是要通过ajax请求换页,这里我采用了Requests模块,post...,最后提取出日期三个数据y,m,d,以及阅读量,这里我们无需关心文章到底是谁发的或者具体时间。...事实证明,性价比最高的发文日期居然是发的很少,访问很少的周末! 后续工作 虽然本次挖掘3220篇文章数据较小,感觉还是可以从速度方面进行优化的。 权重也是我自己简单设计的,这方面也可以进一步优化。...结论与启示 所以说,如果你想要让你的文章获得更多的访问量,获得更大的影响力,尽量在工作日发文吧。

    74930

    弱智错误第二篇:我是如何毁掉一个网游公司的

    ,但如果你不是老板,而是一个普通员工,而且犯了一个无法饶恕的愚蠢错误,那你知道你的下场吗——死的很惨。...有两个“工程师”在为公司的旗舰产品——一款RPG游戏——写代码,我是其中之一。我在大学里学的是哲学,这意味着,虽然我知道如何去思考、解决一个问题,但我对最佳实践方法、设计模式等方面的知识很缺乏。...同事山姆被大量的重构工作纠缠住,于是我就幸运的有机会去开发一些新的令人兴奋的东西了。 我们的开发环境的一大特色是,我们开发代码直接连的是生产库。...我的一部分测试工作涉及到手工的清除 RAIDS 表,然后用程序重建。...但大多数人,更多的是愤怒和不信任。对他们来说,是这个公司提供了他们这最好的工作机会。我把公司推向了困境,也同时把他们的幸福和生计推向困境。 我情绪低落,充满内疚和惭愧。

    1.3K70

    程序员口述:我是如何工作三年后跳槽到美团的?

    当时我司一个从北京回来的前端,用他的职场经验告诉我,下班晚走半小时,是一种工作态度。尤其是作为职场新人,要想在公司有所发展,技术有所提升,就必须付出比别人更多的努力。...然后就让我用原生js写一个回调函数,其实就是问promise的原理了,js写一个。...然而你在js中获取dom元素的时候你必须要通过渲染引擎,这样两个线程之间的数据交换自然会很慢。所以在前端优化中总是要考虑减少dom操作这一项。包括获取dom元素变量储存起来。...一个浏览器是一个进程,虽然js是单线程的,但是浏览器是多线程的,v8引擎也是多线程的,比如有渲染线程,有处理请求的线程。然后说说任务队列,eventloop。没有理解很深也不敢往下说。...虽然这句话俗气,但俗就俗点吧,我喜欢。一个心怀进大厂的人,行动是一种自发行为,而不是鞭策。 在熬过无数个日日夜夜之后,我又一次去参加了美团的面试。本以为这次十拿九稳,可是结果还是败北了。

    3.4K170
    领券