shell命令、调度工具、后台执行线程和软连接
一、shell命令
1、后缀.sh 第一行需要加#!/bin/bash 没有的话,需呀sh 命令执行
示例test.sh:
#!/bin/bash
date
./test.sh 提示没有权限,此时,需要chmod 744 test.sh
二、调度工具
1、airflow
2、azkaban
3、rundeck
4、Linux自带的调度工具:crontab
*代表每的意思
使用crontab --help可以看到,-e表示编辑,-l表示产看内容
示例:crontab -e
* * * * * /root/test.sh >> /root/test.log
分、小时、日、月、周
每隔10s执行一次调度一次
因为linux中只能到分钟,因此,需要将1分钟拆成6份,每份间隔10s,也就是10s调度一次了
test.sh
#!/bin/bash
for((i=1;i<=6;i++))
do
date
sleep 10s
done
exit
三、后台执行
后台执行线程的三种方式
1、./test.sh &
2、nohup ./test.sh &:用于手动启动脚本,看日志,开发维护和测试
3、nohup ./test.sh > /root /test.log 2>&1 &:生产环境中使用
四、软连接
定义:软连接相当于windows系统的快捷方式,使用方式:ln -s 原path 目标path
1、比如CDH升级,如果源文件不见了,会出现光标跳动
解决方法:找原文件文件夹,或者是删除快捷键文件文件夹,重新做新的高版本的软连接
2、建议软连接使用绝对路径,比较明了
示例:ln -s /usr/java/jdk1.8.0_65 /usr/java/latestjdk
3、修改记录日志目录
一般来说CDH中的log目录实在/var/log中,记录方式逐次递增
示例:
/var/log/hbase/xxx.log 1G
/var/log/hbase/xxx.log1 1G
...
/var/log/hbase/xxx.log10 1G
如果想把日志记录到一个比较大的磁盘data01中
mkdir /data01/log
mv /var/log/hbase /data01/log/
建立软连接
ln -s /data01/log/hbase /var/log/hbase
这里有个坑:就是讲/var/log/hbase移动完之后,权限会发生变化,需要修改权限,此时如果忘记了,可以参考集群中其他的机器的全选