在众多磁盘性能测试工具中，dd 命令因其简单易用和易于获得而深受广大运维工程师的喜爱。在这篇文章中，我们将探讨如何将它与 hdparm 命令一起使用，快速有效地评估磁盘性能。
在 WSL2 环境中 clone 一个很大的 git 项目，不走代理速度很慢，所以研究了一下怎么让 WSL2 走 Windows 的代理客户端。
学习 Python 的话，仅掌握标准库是远不够的，有很多好用的第三方库我们也需要用到的，比如，由鼎鼎大名的 K 神开发的爬虫必不可少的 requests 库，一般都是必装的库吧。安装第三方库当然还是用 pip 命令安装最方便了。
国外很多网站都在使用 Cloudflare CDN，但分配给中国内地访客的 IP 并不友好（延迟高、丢包多、速度慢）。虽然 Cloudflare 公开了所有 IP 段 ，但想要在这么多 IP 中找到适合自己的，怕是要累死，于是就有了这个软件，只需简单几步就让你访问速度飞起。
已有云主机id 27b31829-326f-4029-a537-bb327303a32c
上述两个缺点的根源是一致的：Framebuffer中的数据还没准备好整帧数据，就被LCD控制器使用了。 使用双buffer甚至多buffer可以解决这个问题：
使用Python的一定对著名的科学计算集成环境Anaconda（miniconda）并不陌生，而无论是使用Anaconda还是miniconda都必然会用到其包管理器——conda。作为一款管理python安装包的包管理器，其功能要比python自带的pip强大不少。
Hello，各位小伙伴们，大家好，在往期的教程中，我们说完了Windows上的Python pip换源。历史文章里边有写过两篇关于Windows下的pip换源系列，方法行之有效，还没有来得及换源的小伙伴们，得抓紧时间上车了。换源系列文章可以看这里：手把手教你进行pip换源，让你的Python库下载嗖嗖的、手把手教你进行pip换源，让你的Python库下载嗖嗖的（系列二）。今天，咱们就把Linux下的pip换源解决一下。
根据用户输入的关键词(java), 应用服务器使用SQL语句查询数据库, 将查询到的结果返回给用户.
许多现代分布式应用程序都建立在分布式一致键值存储之上。Hadoop生态系统中的应用程序和“Netflix栈”的许多部分都使用Zookeeper。Consul公开了服务发现和运行状况检查API，并支持Nomad等集群工具。Kubernetes容器编排系统，MySQL的Vitess水平扩展，Google Key Transparency项目以及许多其他系统都是基于etcd构建的。有了这么多关键任务集群，服务发现和基于这些一致键值存储的数据库应用程序，测量可靠性和性能是至关重要的。
其中小电视和树莓派掌机瞬间燃起了我的强烈兴趣,小电视可以当是一台超小mini pc主机,主机支持运行Linxu系统和window10.加上最近一直在入坑开源掌机折腾系统,于是决定入坑玩玩.
Docker官方建议在Ubuntu中安装，因为Docker是基于Ubuntu发布的，而且一般Docker出现的问题Ubuntu是最先更新或者打补丁的，在很多版本的CentOS中使不支持更新最新的一些补丁包的。
Github 访问速度很慢的原因是因为 Github 的 CDN 被某墙屏蔽了，由于网络代理商的原因，所以访问下载和访问速度很慢。Ping github.com 时，速度只有 300 多 ms，有时候甚至还会访问超时。
想要开始机器学习，首先要了解一下Linux系统，在众多发行版Linux系统中Ubuntu是一枝独秀，独有的打包安装方式，让我们安装双系统的流程非常简化。
会生成一个1000M的test文件，文件内容为全0（因从/dev/zero中读取，/dev/zero为0源）。
dd bs=64k count=4k if=/dev/zero of=test oflag=dsync（这种方法是最严格的，可以模拟数据库的插入操作，所以很慢，也是用来测试vps硬盘性能标准的一条标杆，一般来说测试结果，如果超过10M，对正常建站就无影响。超过50M，就是非常给力状态，看了这个vps硬盘性能非常的好，DD速度达到了78.9MB/s。）
拢共有 11 篇 Linux 知识点梳理的文章，这次是第 7 篇，梳理完以后 Linux 每日一练就结束更新了，但是还没有完结，后续如果有什么比较重要的 Linux 知识会单独抽出来再讲。
1. 如何看当前Linux系统有几颗物理CPU和每颗CPU的核数？ 物理cpu个数：cat /proc/cpuinfo |grep -c ‘physical id’ CPU一共有多少核：grep -c processor /proc/cpuinfo 将CPU的总核数除以物理CPU的个数，得到每颗CPU的核数。 2. 查看系统负载有两个常用的命令，是哪两个？这三个数值表示什么含义呢？ 两个命令分别是 w 和 uptime 这三个系统负载值分别表示在1分钟、5分钟和15分钟内平均有多少个任务处于活动状
创造一个分布式的实时流处理平台，也正是因为这个原因，Kafka选择了将日志分区和消费者群组模型。
mount的参数对存储的性能有很大的影响。 下面是一些基本的mount参数，大家可以参考。
近期MongoDB在Hack News上是频繁中枪。许多人更是声称恨上了MongoDB，David mytton就在他的博客中揭露了MongoDB许多现存问题。然而恨的人有之偏爱的也同样很多，作为回击：Russell Smith带来了多年工作经验的总结。Russell Smith曾担任Ops和大型网站缩放顾问并且帮助过Guardian、Experian等多家公司，MongoDB London User Group的联合创始人。作为MongoDB Master（MongoDB官方认可的MongoDB核心贡献者
Homebrew 对于使用 Mac 的开发者来说，是再熟悉不过的了，它可以在 macOS 中方便的安装和管理各种系统并不自带的开发包。在安装 homebrew 时，由于众所周知的原因，用官网的安装方法很慢且容易中断，想用国内的源进行安装。让人非常头疼，今天为各位推荐的就是在国内自动安装 Homebrew 的脚本。
除了我们上次介绍的redis快照持久化之外，redis还提供了日志追加（append-only-file）的方式，这种方式会在我们对数据进行修改的时候将相关的操作命令追加到追加日志文件的末尾，所以这种方式的持久化在任何情况下都可以进行数据的恢复，我们只需要按照日志命令重新执行一下即可。在redis的配置文件中有一个appendonly yes表示开启aof。这里默认是不开启的。
来源：Linux爱好者 ID：LinuxHub Linux文件管理从用户的层面介绍了Linux管理文件的方式。Linux有一个树状结构来组织文件。树的顶端为根目录(/)，节点为目录，而末端的叶子为包含数据的文件。当我们给出一个文件的完整路径时，我们从根目录出发，经过沿途各个目录，最终到达文件。 我们可以对文件进行许多操作，比如打开和读写。在Linux文件管理相关命令中，我们看到许多对文件进行操作的命令。它们大都基于对文件的打开和读写操作。比如cat可以打开文件，读取数据，最后在终端显示： $cat test
业务背景：由于需要将ngix日志过滤出来的1亿+条用户行为记录存入Hbase数据库，以此根据一定的条件来提供近实时查询，比如根据用户id及一定的时间段等条件来过滤符合要求的若干行为记录，满足这一场景的技术包括：Solr，Elasticsearch，hbase等，在此选用了Hbase来实践。step 1 hbase建表后直接写入 : 直接hbase建表，然后读取记录文件逐条写入Hbase。由于hbase实际的写入速度远远小于我的提交速度，在写入了1700条记录后，hbase出现了宕机，提交后无响应。查看hb
应用程序和驱动程序之间传递数据时，可以通过read、write函数进行。这涉及在用户态buffer和内核态buffer之间传数据，如下图所示：
Linux文件管理从用户的层面介绍了Linux管理文件的方式。Linux有一个树状结构来组织文件。树的顶端为根目录(/)，节点为目录，而末端的叶子为包含数据的文件。当我们给出一个文件的完整路径时，我们从根目录出发，经过沿途各个目录，最终到达文件。 我们可以对文件进行许多操作，比如打开和读写。在Linux文件管理相关命令中，我们看到许多对文件进行操作的命令。它们大都基于对文件的打开和读写操作。比如cat可以打开文件，读取数据，最后在终端显示： $cat test.txt 对于Linux下的程序员来说，了解文件
BufferedWriter 更高效，因为它内置有一个长度为 8192 的字符数组，也就是 8K 的字符数组。这样子，如果我们往文件里面写内容的话，如果内容没有填满这个数组，就会自动等待直到我们填满，然后一起写入硬盘。硬盘的运行速度是很慢的。但是我们也可以利用 close() 方法，虽然它可能没有满，但是还是可以强制让它写入硬盘。
本文将从上层介绍Linux上的TCP/IP栈是如何工作的，特别是socket系统调用和内核数据结构的交互、内核和实际网络的交互。写这篇文章的部分原因是解释监听队列溢出(listen queue overflow)是如何工作的，因为它与我工作中一直在研究的一个问题相关。
本文翻译自国外论坛 medium，原文地址：https://levelup.gitconnected.com/4-reasons-why-single-threaded-redis-is-so-fast-414e0106f921
python系列文章：https://blog.zeruns.tech/category/Python/
大家好，我是道哥，今天我为大伙儿解说的技术知识点是：【在多线程环境下，如何实现一个高效的日志系统】。
SoftPerfect RAM Disk下载-虚拟硬盘软件 v4.2.0 中文版 – 下载吧
日常开发中，大家肯定遇到过这些需求：“ 数据迁移、数据恢复、新建从库 ” 等等一系列任务，因为做这些需求我们肯定知道，会涉及到 大量的数据 的处理。
这个项目有很多 key/value 数据（约 100 GB）需要使用，使用时基本是只读的，偶尔更新时才会批量导入，且可以忍受短暂的停机导入。我一想 TiKV 和 Pika 等很多 key/value 数据库都选用了 RocksDB，应该是比较靠谱的，于是就选它了。
对于 persistence 模式，也就是持久化存储，redis 提供了两种持久化方法：
许多人不停抱怨 Ruby 运行缓慢。诚然，它的确不如人意，然而这并非致命伤，因为问题的根源在于你的数据库速度缓慢，成为了瓶颈。因此，这个标题也可以改为 “Ruby 虽慢，但对你而言无关紧要”。
Kafka之所以那么快，其中一个很大的原因就是零拷贝（Zero-copy）技术，零拷贝不是kafka的专利，而是操作系统的升级，又比如Netty，也用到了零拷贝。下面我就画图讲解零拷贝，如果对你有帮助请点个赞支持。
应为原文：http://www.ilsistemista.net/index.php/linux-a-unix/6-linux-filesystems-benchmarked-ext3-vs-ext4
运营push发送数量较大，发送时间密集，同一时间段调用baixin发送push的数量几十万上百万不等。
对于全栈而言，数据库技能不可或缺，关系型数据库或者nosql，内存型数据库或者偏磁盘存储的数据库，对象存储的数据库或者图数据库……林林总总,但是第一必备技能还应该是MySQL。从LAMP的兴起，到Mariadb的出现，甚至PG的到来，熟练的MySQL技能都是大有用武之地的。
--第四步（重点），使用miniconda，也就是查看已安装的软件、安装、卸载（生信需要的）软件，我们以fastqc为例，其实安装软件很复杂，甚至有专门的一门课来讲这个，今天这里仅是入门操作。
首先，这篇文章也不知道对别人有没有用，源于我在虚拟机安装Linux，部署Tomcat项目时，为了避免当项目发生改变时，一次次重复的上传项目，因此我想可不可以把本地Tomcat 的 webapps 目录跟 虚拟机 tomcat webapps 目录 同步一下，这样当我更新本地 svn 后，把webapps用软件同步 到 linux （软件只同步改动的文件），这样做可以避免把整个项目上传到 linux (我这有好几个项目，因为你更新svn了，如果只是自己改动了，可以仅把自己的拷到 linux，但是其他人改了什么你并不知道，或者说还要一个个找，只能把整个项目传到 虚拟机)，然后我就在网上找了下 同步软件，发现 BestSync 这个同步软件很好用，下面就说一下具体用法。
先说一下场景 测试环境是linux - centos6.5，项目是分布式的，分别搭建到linux上 数据货使用的是阿里巴巴数据源druid 每次重启后的第一次访问会比较慢，查看日志发现 卡在这个地方 ...{dataSource-1} inited... 网上找了一些问题，发现有个别人有这问题但是都没解决，后来都换了数据源，我觉得这个问题不是数据源的问题 猜测是linux或者mysql问题 首先修改linux配置，由于每次使用ssh登录会很慢，就修改了配置，登录速度提升，但是这不是根本原因 修改mysql文
今天被csdn坑了！昨晚写了一夜的博客，保存到线上草稿了！可是今天打开博客，草稿箱里也找不到，发布的文章中也找不到！作为一家专门研讨技术的网站，居然还会在技术上出现这种问题，这分明就是在打自己的脸啊！ 抱怨的话不多说，现在只好重起炉灶、自认倒霉了。为就接着从文件权限管理开始说，等那天有精力了再把消失的那一段内容给补上。 文件/目录的默认权限和隐藏权限 在前面几篇博客中为也已经提过，文件/目录的基本权限有rwx，那么除了这三个基本权限，Linux使用的ext2/ext3文件系统还存在着文件/目录的隐藏权限
EasyNVR是基于RTSP/Onvif协议接入的安防视频云服务平台，它可以将前端设备进行快速便捷地接入、采集、视频转码、处理及分发，分发的视频流包括：RTSP、RTMP、HTTP-FLV、WS-FLV、HLS、WebRTC等。
前几天，接到研发同事反馈，内网通过 Nginx 代理下载 OSS 的大文件时，老是会断，而在服务器上下载时却很正常，非常奇怪。原本以为可能和 VPN 有关，经确认排除嫌疑。彷徨了许久，最后发现是 Nginx Buffer 的锅。下面就来聊聊这个问题是怎么发生的。
为什么访问速度慢、下载慢？github的CDN被某墙屏了，由于网络代理商的原因，所以访问下载很慢。Ping github.com 时，速度只有300多ms。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
