目录 Core Linux折腾（一）[一] Core Linux折腾（一）[二] Core Linux折腾（二） Core Linux折腾（三） Core Linux 操作文档（一） Ti
程序执行一个MapReduce，该MapReduce实现了自定义分区，总共分为4个分区，且在Driver端自定义设置reducer端num个数为4
卸载/home时 提示目标忙，fuser -m /home查看谁用/home时提示没有fuser命令
新装的虚拟机空间大小选择的是20G，后来觉得不够用，准备扩大硬盘空间，这里有两种方法，一种是编辑虚拟机配置文件直接添加一块硬盘，再挂载
Vmvare设置好虚拟机的磁盘大小之后，发现磁盘空间不够了，这个时候怎么扩展磁盘的大小呢？
定义：Swap space交换空间，是虚拟内存的表现形式。系统为了应付一些需要大量内存的应用，而将磁盘上的空间做内存使用，当物理内存不够用时，将其中一些暂时不需要的数据交换到交换空间，也叫交换文件或页面文件中。
早期的共享内存，着重于强调把同一片内存，map到多个进程的虚拟地址空间（在相应进程找到一个VMA区域），以便于CPU可以在各个进程访问到这片内存。
OpenHarmony是面向全场景泛终端设备的操作系统，终端设备内存性能的强弱会直接影响用户的体验。终端设备的内存差异很大，对于内存比较小的终端设备，内存优化方案无疑是增强内存性能、提升用户体验的关键。针对传统内存方案及管理机制的不足，OpenHarmony构建了一套完善的内存解决方案——ESWAP。
肯定有人和我一样，很早就听说过Linux的这个词，但是又没接触过。然后随手百度一下看着满满的命令惊呆了，不知道从哪里开始学习。这种状况一直维持到我面试的时候，我不怕跟你们说，我拿着写着“熟悉Linux的系统”的简历去面试，其实当时的我都没有了解Linux的到底是什么！我相信大家肯定都用过的Windows系统，或者也用过的mac系统，其实Linux也是和这些在Windows，Mac一样，都是系统，只是不同的形式呈现出来给用户体验。这样说大家都了解吧，就是个系统。
电脑因为根目录看见不足，造成开机一直处于登录界面，经过我在终端折腾半天，删除了opt目录等操作，才终于进入xwindows桌面，所以决定增大\目录的大小，文章同步进行，解决成功，发文，解决这个只是时间问题
当我们在安装系统的时候，由于没有合理分配分区空间，在后续维护过程中，发现有些分区空间不够使用，而有的分区空间却有很多剩余空间。如果这些分区在装系统的时候使用了lvm（前提是这些分区要是lvm逻辑卷分区），那么就可以轻松进行扩容或缩容！不同文件系统类型所对应的创建、检查、调整命令不同，下面就针对xfs和ext2/3/4文件系统的lvm分区空间的扩容和缩容的操作做一记录： ------------------------------------------------------------------------------------------ 特别注意的是： resize2fs命令 针对的是ext2、ext3、ext4文件系统 xfs_growfs命令 针对的是xfs文件系统 ------------------------------------------------------------------------------------------
在选择压缩算法的时候，首先要考虑的就是压缩比和压缩速率。压缩比主要是为了节省网络带宽和磁盘存储空间，而压缩速率主要影响吞吐量。
Linux内核命名格式为 “R.X.Y-Z”，其中R、X、Y、Z命名意义如下： 3.10.0-862.el7.x86_64 数字R：目前发布的内核主版本，到目前为止有4个大版本更新 数字X：次版本号，奇数为开发版，偶数为稳定版 数字Y：错误修补的次数，无论在内核增加安全补丁、修复Bug、实现新的特性或者驱动时都会改变 数字Z：表示这个当前版本的第862次微调patch
lvm(Logical Volume Manager) 逻辑卷管理， 可以满足linux系统动态调整各分区大小，满足服务器在不同的运行时期的需求。
当你在使用linux系统时，为了满足当时的工作需要你装了一个100G的磁盘，但是你发现随着公司的发展，和需要储存数据的空间的增大，你会不会重新买些磁盘给装到机器上去呢？每装一次重新分配一次磁盘，就复制一次数据，那这样对于工作的你，是不是非常的麻烦？如果我们用LVM就能解决这类的磁盘管理问题。
发表评论 862 views A+ 所属分类：技术 谷歌Android系统手机默认只能把软件安装在手机 内存里，使本来就不大的手机内存显得捉襟见肘。如果你也是个手机软件狂人，喜欢尝试各种各样新奇
如果没有使用 LVM 来管理我们的磁盘， 那么我们还可以通过下面方法扩大我们的分区。
前几天闲来无事翻微薄，有人写道：“曾经偷情被游街，如今二奶喊干爹；曾经撞人忙救人，如今撞人再杀人；曾经私情偷着干，如今淫乱存U盘；曾经献血为扶伤，如今慈善越重洋；曾经相好牵肚肠，如今小三炫富忙；曾经摩托都挺酷，如今地铁都追尾；曾经县长做皮卡，如今少年开宝马；曾经精英成右派，如今牛逼全二代。”不禁感慨万千，这世道真是变了。
这是100个命令的第58个命令，包含了LVM 中pvcreate、vgcreate、lvcreate 等命令的使用方法以及 LVM 的原理的简要介绍。
数据库系统的性能和可伸缩性可以对任何项目产生重大影响。在许多情况下，开发人员必须从一个数据库系统迁移到另一个数据库系统，以提高数据库密集型应用程序的性能和操作速度。不仅如此，每个应用程序都会进行修改，以获得更好的用户体验，并引入新功能，对数据库存储的需求也会大大增加。如果您的应用程序的数据库系统没有提供健壮的可伸缩性功能，并且如果随着负载的增加性能受到影响，那么应用程序的受欢迎程度将受到影响。今天，让我们来比较两个最流行的数据库系统MS SQL Server和PostgreSQL的性能和可伸缩性因素。
基本介绍 Linux用户安装Linux 操作系统时遇到的一个最常见的难以决定的问题就是如何正确地给评估各分区大小，以分配合适的硬盘空间。随着 Linux的逻辑盘卷管理功能的出现，这些问题都迎刃而解， lvm是逻辑盘卷管理（Logical Volume Manager）的简称，它是 Linux环境下对磁盘分区进行管理的一种机制， LVM是建立在硬盘和分区之上的一个逻辑层，来提高磁盘分区管理的灵活性。 LVM基本术语： 1）物理存储介质：这里指系统的存储设备：硬盘，如： /dev/hda、/dev/sda等
磁盘上的数据都存放于磁道上。磁道就是磁盘上的一组同心圆，其宽度与磁头的宽度相同。为了避免减少干扰，磁道与磁道之间要保持一定的距离(inter-track gap)，沿磁盘半径方向，单位长度内磁道的数目称之为道密度(道/英寸,TPI)，最外层为0道。
逻辑卷管理器（Logical volume Manager）是 Linux 系统用于对硬盘分区进行管理的一种机制，理论性较强，其创建初衷是为了解决硬盘设备在创建分区后不易修改分区大小的缺陷。尽管对传统的硬盘分区进行强制扩容或缩容从理论上来讲是可行的，但是却可能造成数据的丢失。而 LVM 技术是在硬盘分区和文件系统之间添加了一个逻辑层，它提供了一个抽象的卷组，可以把多块硬盘进行卷组合并。这样一来，用户不必关心物理硬盘设备的低层架构和布局，就可以实现对硬盘分区的动态调整。
由盘片，磁头组成，数据存在盘片的环形磁道上，读写时，磁头移动，定位到数据的磁道，进行数据读写
Swap分区在系统的物理内存不够用的时候，把物理内存中的一部分空间释放出来，以供当前运行的程序使用。那些被释放的空间可能来自一些很长时间没有什么操作的程序，这些被释放的空间被临时保存到Swap分区中，等到那些程序要运行时，再从Swap分区中恢复保存的数据到内存中。swap分区是从磁盘空间划分而来，有的是单独使用一个分区，有的是把一个大文件当做swap。
Zabbix 作为一个老牌的开源监控方案，长期被用于生产实践。但是原生方案一般会采用 MySQL 作为后端存储，无法应对更大规模的监控。TiDB 兼容 MySQL 协议，可以替换 MySQL 从而增强 Zabbix 的大规模监控能力，实现新的监控方案 TiZabbix。TiZabbix 通过优化监控实施逻辑，弥补因 TiDB 和 MySQL 差异造成的诸多问题，成功完成了 10000+ 监控对象和 16T 数据存储查询的实践。
我们讲页框分配器的时候讲到了快速分配和慢速分配，其中伙伴算法是在快速分配里做的，忘记的小伙伴我们再看下：
管理磁盘空间对系统管理员来说是一件重要的日常工作。一旦磁盘空间耗尽就需要进行一系列耗时而又复杂的任务，以提升磁盘分区中可用的磁盘空间。它也需要系统离线才能处理。通常这种任务会涉及到安装一个新的硬盘、引导至恢复模式或者单用户模式、在新硬盘上创建一个分区和一个文件系统、挂载到临时挂载点去从一个太小的文件系统中移动数据到较大的新位置、修改 /etc/fstab 文件的内容来反映出新分区的正确设备名、以及重新引导来重新挂载新的文件系统到正确的挂载点。
在 VirtualBox 或 VMware 中创建虚拟硬盘时，需要指定最大磁盘大小。如果以后想要在虚拟机硬盘上有更多空间，则必须扩大虚拟硬盘和分区。
当运行“INSERT ... SELECT”语句向Parquet或者ORC格式的表中插入数据时，如果启用了动态分区，你可能会碰到以下错误，而导致作业无法正常执行。
硬件平台: 全志R/V/F/MR/H 系列芯片。软件平台: Tina v3.5 及后续版本。
1、什么是NTFS－新(N)技术(T)文件(F)系统(S)？ 想要了解NTFS，我们首先应该认识一下FAT。FAT(File Allocation Table)是"文件分配表"的意思。对我们来说，它的意义在于对硬盘分区的管理。FAT16、FAT32、NTFS是目前最常见的三种文件系统。 FAT16：我们以前用的DOS、Windows 95都使用FAT16文件系统，现在常用的Windows 98/2000/XP等系统均支持FAT16文件系统。它最大可以管理大到2GB的分区，但每个分区最多只能有65525个簇(
比如进程的代码段、映射的文件都是file-backed，而进程的堆、栈都是不与文件相对应的、就属于匿名页。
我对Linux不是很熟悉，我在学习的过程中记录了很多笔记，在去年发过一篇文章:CentOS 7系统服务器上安装R和Rstudio，并在浏览器中运行Rstudio，今天我把CentOS云服务器挂载云硬盘与硬盘分区这一章的笔记分享给大家。本教程是以腾讯云服务器和云硬盘介绍的，所以要实操的话，你自己还需要花点钱。 1、云硬盘的挂载
本文的内容可能和之前的金融企业将 TiDB 应用在业务上的实践不同，下面主要介绍我们如何把 TiDB 应用在金融行业的后台运维监控上。Zabbix 作为一个老牌的开源监控方案，长期被用于生产实践。但是原生方案一般会采用 MySQL 作为后端存储，无法应对更大规模的监控。TiDB 兼容 MySQL 协议，可以替换 MySQL 从而增强 Zabbix 的大规模监控能力，实现新的监控方案 TiZabbix。TiZabbix 通过优化监控实施逻辑，弥补因 TiDB 和 MySQL 差异造成的诸多问题，成功完成了 10000+ 监控对象和 16T 数据存储查询的实践。
当我们在安装系统的时候，由于没有合理分配分区空间，在后续维护过程中，发现有些分区空间不够使用，而有的分区空间却有很多剩余空间。如果这些分区在装系统的时候使用了lvm（前提是这些分区要是lvm逻辑卷分区），那么就可以轻松进行扩容或缩容！不同文件系统类型所对应的创建、检查、调整命令不同，下面就针对xfs和ext2/3/4文件系统的lvm分区空间的扩容和缩容的操作做一记录： ----------------------------------------------------------------------
1，jvm调优 这个是扯不断，理还乱。建议能加内存就加内存，没事调啥JVM，你都不了解JVM和你的任务数据。 spark调优系列之内存和GC调优 2，内存调优 缓存表 spark2.+采用： spark.catalog.cacheTable("tableName")缓存表，spark.catalog.uncacheTable("tableName")解除缓存。 spark 1.+采用： 采用 sqlContext.cacheTable("tableName")缓存，sqlContext.uncacheTa
前言： 朋友遇到了load average偏高的问题，关于load average的解释，网上也是五花八门，有的说法甚至都有些不负责任。在这里详细分析一下load average。 分析： 1，l
MySQL是一个功能强大的开源数据库。随着越来越多的数据库驱动的应用程序，人们一直在推动MySQL发展到它的极限。这里是101条调节和优化 MySQL安装的技巧。一些技巧是针对特定的安装环境的，但这些
描述：LVM——Logical Volume Manager就是动态卷管理在Linux2.4内核以上实现的磁盘管理技术，它可以将多个硬盘和硬盘分区做成一个逻辑卷，并把这个逻辑卷作为一个整体来统一管理，动态对分区进行扩缩空间大小，安全快捷方便管理。
这个是扯不断，理还乱。建议能加内存就加内存，没事调啥JVM，你都不了解JVM和你的任务数据。默认的参数已经很好了，对于GC算法，spark sql可以尝试一些 G1。
CPU是操作系统稳定运行的根本，CPU的速度与性能在很大程度上决定了系统整体的性能，因此，CPU数量越多、主频越高，服务器性能也就相对越好。但事实上并非完全如此。
在RANGE和LIST分区中，我们必须明确指定一个给定的区间或列值集合，来指定哪些记录进入哪些分区；
对于sequence 生成的主键索引，高并发时会出现严重的争用情况，下面AWR的前TOP4 等待事件，都是index contention相关的等待事件，非常严重：
在大数据领域中，Hive是一个常用的数据仓库工具，可以方便地对大规模数据进行管理和分析。当需要将大量数据插入到Hive表中时，我们需要考虑一些优化策略，以提高插入性能和效率。
Flink是依赖内存计算，计算过程中内存不够对Flink的执行效率影响很大。可以通过监控GC（Garbage Collection），评估内存使用及剩余情况来判断内存是否变成性能瓶颈，并根据情况优化。
Linux支持多种文件系统类型，包括ext2、ext3、vfat、jffs、romfs和nfs等，为了对各类文件系统进行统一管理，Linux引入了虚拟文件系统VFS(Virtual File System)，为各类文件系统提供一个统一的应用编程接口。
List 适合与有固定取值的列，支持复合分区 有限的分区，插入记录在这一列的值不在List中，则数据丢失 一般只针对某一列
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
