首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

设置Hadoop+Hbase集群pid文件存储位置

因为基于java开发的程序,想要停止程序,必须通过进程pid来确定,而hadoop和hbase默认的情况下,会把pid文件存储在Linux上的/tmp目录的某个目录下,进程名命令规则一般是 框架名-用户名...-角色名.pid,而默认情况下,linux的tmp里面的东西,一天会删除一次,所以把pid文件放在这里面,并不是长久之计,为了安全起见,我们还是放到一个固定的目录下最好,当然不能放在/tmp下 如何配置避免把进程文件写到临时目录下面呢...一:Hadoop配置: (1)修改hadoop-env.sh 修改如下,如果没有下面的设置,可以直接添加: export HADOOP_PID_DIR=/ROOT/server/pids_hadoop_hbase...,影响 JobHistoryServer 进程pid存储 (3)修改yarn-env.sh 修改或者添加(不存在此项配置时),这里面我没有找到pid的环境设置变量,所以就直接添加了 export...进程pid存储 再次启动集群,就会发现指定的pids_hadoop_hbase下有进程pid文件已经存储进来: ?

1.7K130
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    linuxunix下 pid文件作用

    l在linux系统的目录/var/run下面一般我们都会看到很多的*.pid文件。而且往往新安装的程序在运行后也会在/var/run目录下面产生自己的pid文件。那么这些pid文件有什么作用呢?...(1) pid文件的内容:pid文件为文本文件,内容只有一行, 记录了该进程的ID。 用cat命令可以看到。 (2) pid文件的作用:防止进程启动多个副本。...(3) 编程技巧: 调用fcntl设置pid文件的锁定F_SETLK状态,其中锁定的标志位F_WRLCK。 如果成功锁定,则写入进程当前PID,进程继续往下执行。...该符号以参数arg的 FD_CLOEXEC位定夺 F_GETFL获得open()设置的符号 F_SETFL改换open()设置的符号 F_GETLK获得文件锁定的事态,依据lock的描写,定夺是否上文件锁...,其持有历程的历程号储藏在l_pid中,由F_GETLK归来 等闲是将l_start设置为0,l_whence设置为SEEK_SET,l_len设置为0

    1.1K20

    MySQL:The server quit without updating PID file

    按照字面意思么,就是没有更新PID文件,于是乎我就去我的MySQL目录,看了一下,并建了一个PID文件,随便弄了个进程号进去(童鞋们这么搞首先得确定这个进程号,没有进程在用。)。然后重启MySQL。...然后检查了一下my.cnf(注意:这个文件一般是放在/etc下的,当然如果你放在你的MySQL程序的安装目录,那么建议你把/etc/my.cnf给重命名,以防冲突。) 发现TMD配置完全不一样!!...麻蛋,原来我已经把这个处理过了,那这个文件怎么还会 有呢?所以奇怪的地方就在这里。 弄掉之后,就OK了。...很多时候,MySQL的错误都是由于这玩意造成的,毕竟你装的时候,只是测试的话,基本不会配置什么配置文件的。亦或者,你喜欢直接在MySQL的安装目录配置文件,那么这两个就会冲突了。...MySQL优先读取的是/etc/下的而不是你的安装目录下的。

    1.2K60

    设置MySQL储存文件大小的限制

    在servlet上传图片到MySQL数据库过程中,MySQL存储文件大小是有限制的,比如数据库只能存储1M文件的大小,上传的文件就不能超过这个限制,如果超过限制就会报以下的错误信息: 故障现象:数据存储文件的时候报...以上的问题就是上传文件的大小已经超过数据库限制的大小,导致数据库存储不了文件,所以这个时候我们需要重新设置数据库存储文件的大小: 从报错看是 mysql的 max_allowed_packet参数值设置太少了...,用show VARIABLES like ‘%max_allowed_packet%’;查看,显示的是1M(1024x1024),这当然就有问题了,超过1M就存不了 MySQL根据配置文件会限制server...有时候大的插入和更新会被max_allowed_packet 参数限制掉,导致失败,要重新设置参数可以在MySQL命令行中运行: set global max_allowed_packet = 2x1024x1024x10...然后关闭掉这此MySQL Server链接,再重新连接。

    3.7K70

    mysql启动报错The server quit without updating PID file

    现网mysql无法启动是很让人头疼的,数据很有可能恢复不了,解决方法如下: 查看mysql目录下的日志,根据日志来锁定错误原因(mysql的错误日志很抽象) a.如果日志不能提供任何帮助则可进行以下步骤...=/var/lib/mysql/mysql.sock 2.将之前数据库安装目录中需要的数据库(需要还原的数据库)、ib_logfile0、ib_logfile1、ibdata1(主要是这三个文件)拷贝到新的...mysql目录并设置用户和用户组为mysql:mysql root#cp -r /home/mysqlData/mysql/需要的文件文件夹  /var/lib/mysql/ root#chown -...hR mysql:mysql /var/lib/mysql root#ps -ef|grep mysql       --查看mysql的进程  如果有则kill root#service mysql...start     --启动mysql root#mysql -u root -p        --进入mysql客户端 mysql>set password for 'root'@'%'=password

    25K10

    启动mysql报错The server quit without updating PID file!

    相信很多人搜到的结果都是以下几项: 可能是/usr/local/mysql/data/mysql.pid文件没有写的权限 解决方法 :给予权限,执行 “chown -R mysql:mysql /var...mysql在启动时没有指定配置文件时会使用/etc/my.cnf配置文件,请打开这个文件查看在[mysqld]节下有没有指定数据目录(datadir)。...解决方法:请在[mysqld]下设置这一行:datadir = /usr/local/mysql/data skip-federated字段问题 解决方法:检查一下/etc/my.cnf文件中有没有没被注释掉的...我的所有文件的权限都没问题,所属主和所属组也没问题,也没有找到所谓的mysql-bin.index文件,日志文件也有!!!心想,what are you 弄啥嘞???...意思是说:删除mysql的库文件下的ibdata*文件

    131.3K61

    mysql乱码设置

    MySQL默认字符编码的设置 MySQL的默认编码是Latin1,不支持中文,那么如何修改MySQL的默认编码呢,下面以UTF-8为例来说明  需要注意的是,要修改的地方非常多,相应的修改方法也很多...下面是一种最简单最彻底的方法:  一、Windows  1、中止MySQL服务  2、在MySQL的安装目录下找到my.ini,如果没有就把my-medium.ini复制为一个my.ini...即可  3、打开my.ini以后,在[client]和[mysqld]下面均加上default-character-set=utf8,保存并关闭  4、启动MySQL服务  二、Linux... 1、中止MySQL服务(bin/mysqladmin -u root shutdown)  2、在/etc/下找到my.cnf,如果没有就把MySQL的安装目录下的support-files...服务(bin/mysqld_safe &)  非常简单,这样的修改一劳永逸,今后MySQL一切相关的默认编码均为UTF-8了,创建新表格的时候无需再次设置  需要注意的是,当前数据库中已经存在的数据仍保留现有的编码方式

    3.8K60

    MySQL数据库文件的移动和权限设置

    $ sudo su # service mysql stop # cd /var/lib // 注意下面的mysql是当前的数据文件路径,/media/data是挂载的新存储阵列 // 使用-a选项,是已经考虑了要把文件的权限属性一起拷贝...,免得拷贝完成再设置权限 # cp -Ra mysql /media/data/ // 老文件先不删除,保留备份防止意外 # mv mysql mysql-bak // 偷个懒,直接建一个链接,免得要修改...mysql启动脚本和设置文件 # ln -s /media/data/mysql/ . # service mysql start 回车键按下,系统提示: start: Job failed to start.../data/mysql-files/** rwk, // 改的时候根据你的数据路径,调整上面4行的设置 // 此外考虑到/var/lib/mysql这个路径也可能会有测试需要,所以原始的4行保留,额外增加...如果使用了Centos,则要更改SELinux的额外权限设置,可参考下面链接中介绍的两个方法操作。

    7.9K20

    启动MySql提示:The server quit without updating PID file(…)失败

    启动MySql提示:The server quit without updating PID file(…)失败. 1.可能是/usr/local/mysql/data/rekfan.pid文件没有写的权限...解决方法 :给予权限,执行 “chown -R mysql:mysql /var/data” “chmod -R 755 /usr/local/mysql/data”  然后重新启动mysqld!...3.可能是第二次在机器上安装mysql,有残余数据影响了服务的启动。 解决方法:去mysql的数据目录/data看看,如果存在mysql-bin.index,就赶快把它删除掉吧,它就是罪魁祸首了。...p=186 4.mysql在启动时没有指定配置文件时会使用/etc/my.cnf配置文件,请打开这个文件查看在[mysqld]节下有没有指定数据目录(datadir)。...解决方法:请在[mysqld]下设置这一行:datadir = /usr/local/mysql/data 5.skip-federated字段问题 解决方法:检查一下/etc/my.cnf文件中有没有没被注释掉的

    2.9K40
    领券