上一篇我们已经简单的介绍了Flume，那么这一篇文章博主继续为大家介绍如何实时读取本地/目录文件到HDFS上。
在Msql注入中，load_file()函数在获得webshell以及提权过程中起着十分重要的作用，常被用来读取各种配置文件
目录浏览漏洞是由于网站存在配置缺陷，导致网站目录可以被任意浏览，这会导致网站很多隐私文件与目录泄露，比如数据库备份文件、配置文件等，攻击者利用该信息可以为进一步入侵网站做准备。
1.基本结构介绍 flume是三层架构，agent，collector，storage。每一层都可水平扩展。 其中，agent就是数据采集方；collector是数据整合方；storage是各种数据落地方，如hdfs。 前两者都是由source和sink组成，source是数据读取组件，sink是数据分发组件。 前两者作为不同类型node统一归master管理。可在master shell活web中动态配置。 2.自带的source text 文件，按行发送 tail 探测新产生数据
wsl.conf 和 .wslconfig 文件用于基于每个分发wsl.conf () 和全局跨所有 WSL 2 分发.wslconfig版 () 配置高级设置选项。本指南将介绍每个设置选项（何时使用每种文件类型、存储文件的位置、示例设置文件和提示）。
描述：dpkg是软件包管理基础工具“Debian Packager ”的简写,为 “Debian” 专门开发的套件管理系统，方便软件的安装、更新及移除,dpkg命令与rpm有异曲同工之妙; 使用方法：
在 Windows 系统中的应用程序大多是闭源软件，这些软件的开发商在发行软件前会将软件编译为二进制软件，用户一般只能通过软件提供的安装程序进行安装。
于是乎就在网上找了下资料，发现可以通过 Dnsmasq 来解决这个问题，原理其实就是本机的 DNS 指向 Dnsmasq 服务器，然后 Dnsmasq 通过类似通配符 (*) 的方式进行匹配，凡是匹配到 *.baidu.com 的都解析到 6.6.6.6。 利用 Dnsmasq 实现 hosts 泛解析
insmod命令用于将给定的模块加载到内核中。Linux有许多功能是通过模块的方式，在需要时才载入kernel。如此可使kernel较为精简，进而提高效率，以及保有较大的弹性。这类可载入的模块通常是设备驱动程序。
redis简介: redis是一个nosql数据库，也就是非关系型数据库，数据保存在内存中而不是硬盘中，所以读取速度非常快，但是因为它是非关系型数据库，不适合用来存储复杂的数据，所以常用来做缓存。一开始redis只有linux版本，后来退出了windows版，但是服务器基本上都是linux系统，所以接下来看看在linux中如何安装redis。 redis的安装: 1、安装gcc编译器 yum install gcc-c++ 2、下载redis 我们把redis下载到/usr/local/software
本文不一定适合比较老版本的Linux，如果只关心使用，请直接看“总结”，本文主要针对CentOS，其它Linux发行版本类似，但细节可能有出入，比如重启服务可能不是用systemctl，而是service等。
zookeeper下载:http://mirror.bit.edu.cn/apache/zookeeper/
说到http协议，其实大家都不陌生，我们日常上网，打开网页，使用的就是http协议，实现web浏览功能。
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
sudo apt-get install build-essential libgtk2.0-dev libavcodec-dev libavformat-dev libjpeg62-dev libtiff4-dev cmake libswscale-dev libjasper-dev
例子_GET['filename']参数开发者没有经过严格的过滤，直接带入了include的函数攻击者可以修改_GET['filename']的值，执行非预期的操作
和SQL注入等攻击方式一样，文件包含漏洞也是一种“注入型漏洞”，其本质就是输入一段用户能够控制的脚本或者代码，并让服务器端执行。
/etc/grub.conf文件为链接文件，系统读取内存中的grub配置信息，并依照此配置信息启动不同的操作系统
前言 由于微信小程序要使用Https，但是又不能修改已有线上的配置。所以最简单的方法就是使用nginx转发，在nginx上使用https，然后再转发到内部服务器。Nginx由于其优良的性能。一台4核16GB的内存完全可以支撑日均百万pv级别的访问。 基础知识 Nginx由于使用了 epoll模型，要求linux的内核必须在2.6以上。要了解epoll模型，可以看看知乎上的这篇文章：IO多路复用与 select，poll与epoll的关系。 使用 uname -a 查看Linux 内核版本,如下是Cent
成功读取出来。从nmap中我们知道这是apache的，我们看看读日志文件。/var/log/nginx/access.log
Linux是有文件句柄限制的，而且Linux默认不是很高，一般都是1024，生产服务器用其实很容易就达到这个数量 系统总限制是在这里，/proc/sys/fs/file-max.可以通过cat查看目前的值，修改/etc/sysctl.conf 中也可以控制. /proc/sys/fs/file-nr，可以看到整个系统目前使用的文件句柄数量 linux 中数据的含义 /proc/sys/fs/file-nr [root@localhost logs]# cat /proc/sys/fs/fi
PS：可以监听当前服务器的流量。电脑配置至少4G内存，ES默认是2G的内存，目前是使用的伪分布式的方式，多台电脑也是这样的。
Linux系统上的每个文件和目录均由某个人拥有，拥有者可以完全控制更改或删除他们拥有的文件。除了有一个拥有用户外，文件还有一个拥有组。
这里使用VLC播放器,下载VLC 开始播放,点击[媒体]->[流]->[网络] 输入刚刚推流的地址。然后选在下方的播放。
报如下错误：说明不能以root账户启动，需要创建一个普通用户，用普通用户启动才可以。
Lanproxy是ffay个人开发者的一个可将局域网内服务代理到公网的内网穿透工具。
在Linux下有些时候你会发现有的文件既然连root用户都没法删除，会报rm: 无法删除"/var/log/messages": 不允许的操作,这大部分原因是因为利用了chattr命令锁定改文件了。
Holer exposes local servers behind NATs and firewalls to the public internet over secure tunnels.
运维系统调优的过程中，必然会遇到的一个问题就是资源限制，在linux中，ulimit命令是用于控制shell程序的资源限制，它是linux的shell内建指令(可以用type命令查看命令是内建还是外部)
假设有四台电脑：Windows 10、Mac OS X、Ubuntu 16.04、CentOS 7.2，任意一台电脑都可以作为 Master端 或 Slaver端，比如：
随着硬盘容量、速度的快速发展，硬盘的可靠性问题越来越重要，今天的单块硬盘存储容量可轻松达到1TB，硬盘损坏带来的影响非常巨大。 不同的文件系统(xfs,reiserfs,ext3)都有自己的检测和修复工具。检测之前可以先使用dmesg命令查看有没有硬件I/O故障的日志，如果有，先用fsck看看是不是文件系统有问题，如果不是则可以使用下面介绍硬盘检测和优化方法来修复它。 grep”error”/va/log/messages*; Linux检测硬盘坏道 使用SMART检测硬盘 SMART是一种磁盘自我分析检测技术，早在90年代末就基本得到了普及每一块硬盘（包括IDE、SCSI），在运行的时候都会将自身的若干参数记录下来，这些参数包括型号、容量、温度、密度、扇区、寻道时间、传输、误码率等。硬盘运行了几千小时后，很多内在的物理参数都会发生变化，某一参数超过报警阈值，则说明硬盘接近损坏，此时硬盘依然在工作，如果用户不理睬这个报警继续使用，那么硬盘将变得非常不可靠，随时可能故障。 启用SMART SMART是和主板BIOS上相应功能配合的，要使用SMART，必须先进入到主板BIOS设置里边启动相关设置。一般从Pentium2级别起的主板，都支持SMART，BIOS启动以后，就是操作系统级别的事情了（Windows没有内置SMART相关工具,需要安装第三方工具软件)，好在Linux上很早就有了SMART支持了,如果把Linux装在VMware等虚拟机上，在系统启动时候可以看到有个服务启动报错：smartd。这个服务器就是smart的daemon进程（因为vmware虚拟机的硬盘不支持SMART，所以报错）。smartd是一个守护进程（一个帮助程序）,它能监视拥有自我监视,分析和汇报技术(Self-Monitoring, Analysis, and Reporting Technology – SMART)的硬盘。SMART体系使得硬盘能监视并汇报自己的运行状况.它的一个重要特性是能够预测失败,使得系统管理员能避免数据丢失。
共4个文件，服务端一个UpdateServer.conf配置文件和一个UpdateServer脚本，客户端一个UpdateClinet.conf配置文件和一个UpdateClient脚本。 配置文件里主要写一些路径变量，文件名变量，IP地址变量，涉及路径最好用绝对路径。配置文件用来给用户提供修改程序执行环境和相关输入信息。
在实际的项目开发中，大家经常使用的还是http连接的方式。下面我们为svn配置http访问。svn的http访问时依赖apache的dav_svn模块，然后赋予www-data访问权限，进行版本控制。
最近在一次渗透测试中遇到了任意文件下载漏洞，正常的利用手段是下载服务器文件，如脚本代码，服务器配置或者是系统配置等等。但是有的时候我们可能根本不知道网站所处的环境，以及网站的路径，这时候我们只能利用../来逐层猜测路径，让漏洞利用变得繁琐。笔者在对此漏洞学习回炉重造的过程中，对此漏洞进行了细致的整理，希望为大家的学习提供一些帮助，和思路。另外如果有不足之处希望大家可以进一步补充。 漏洞介绍: 一些网站由于业务需求，往往需要提供文件查看或文件下载功能，但若对用户查看或下载的文件不做限制，则恶意用户就能够查看或
在“/etc/lilo.conf”文件中加入三个参数：time-out,restricted,password。这三个参数可以使你的系统在启动lilo时就要求密码验证。
grep 是一款非常流行的文本搜索工具，它根据正则表达式对文本进行搜索，并输出匹配的行或文本。
本文介绍linux内存机制、虚拟内存swap、buffer/cache释放等原理及实操。
/usr/share/logstash/pipeline/logstash.conf
我们知道，直接从物理内存读写数据要比从硬盘读写数据要快的多，因此，我们希望所有数据的读取和写入都在内存完成，而内存是有限的，这样就引出了物理内存与虚拟内存的概念。
本公众号提供的工具、教程、学习路线、精品文章均为原创或互联网收集，旨在提高网络安全技术水平为目的，只做技术研究，谨遵守国家相关法律法规，请勿用于违法用途。
在我们的开发生活中，常常需要让某些应用或服务持续运行。这时候，就需要一个能够帮助我们管理这些进程的工具。
作者：matrix 被围观: 4,327 次 发布时间：2018-12-19 分类：零零星星 | 7 条评论 »
这是一篇搭建 ELK 集群的文章，主要涉及3大组件 elasticsearch、logstash 和 kibana 以及一个日志收集代理 filebeat的安装，通过部署 ELK 建立对其感性的认识。
项目需要使用的主板有很多性能需要经过测试之后才能用于开发使用，因此将Linux上一些常用的tools移植进板子进行测试。
*另外，如果不想每次新启一个shell都设置LD_LIBRARY_PATH，可以编辑~/.bash_profile文件：
[root@xxxx local]# curl -o mongodb-linux-x86_64-3.4.6.tgz https://fas tdl.mongodb.org/linux/mongodb-linux-x86_64-3.4.6.tgz
---- 软件准备 一台Linux虚拟机 我用的CentOS-6.6的一个虚拟机，主机名为repo 参考在Windows中安装一台Linux虚拟机 spark安装包 下载地址：https://mirrors.aliyun.com/apache/spark/ 我用的spark-2.2.0-bin-hadoop2.7.tgz 要根据自己机器中的hadoop版本选择对应的spark版本 ---- (1) 把安装包上传到服务器并解压 [root@repo soft]# tar -zxvf spark-2
docker安装步骤 https://docs.docker.com/install/linux/docker-ce/centos/#install-docker-ce-1
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
