- 浏览: 129145 次
- 性别:
- 来自: 北京
文章分类
hadoop hbase logs目录下日志越来越多,写个简单的脚本备份删除一下
#!/bin/sh #backup hadoop&hbase logs which are 30 days ago, and delete them cd /work/hadoop-0.20.203.0/logs today=`date +%Y-%m-%d` find . -mtime +30 -print > /tmp/hadooplogslist-$today if [ -d /work/hadoop_logs_bak ]; then echo "/work/hadoop_logs_bak already exists"; else mkdir /work/hadoop_logs_bak fi tar -T /tmp/hadooplogslist-$today -zcvf /work/hadoop_logs_bak/hadoop-logs-bak-$today.tar.gz find . -mtime +30 -exec rm -r {} \; rm -rf /tmp/hadooplogslist-$today echo "hadoop logs backup done" cd /work/hbase-0.90.3/logs find . -mtime +30 -print > /tmp/hbaselogslist-$today if [ -d /work/hbase_logs_bak ]; then echo "/work/hbase_logs_bak already exists" else mkdir /work/hbase_logs_bak fi tar -T /tmp/hbaselogslist-$today -zcvf /work/hbase_logs_bak/hbase-logs-bak-$today.tar.gz find . -mtime +30 -exec rm -r {} \; rm -rf /tmp/hbaselogslist-$today echo "hbase logs backup done"
发表评论
-
HDFS架构简介
2012-07-17 15:02 1615转自:http://asyty-cp.blog.163.com ... -
Hadoop Dont's: What not to do to harvest Hadoop's full potential
2012-07-15 15:45 694We've all heard this story. ... -
hadoop-0.20.203启用LZO压缩 安装成功
2012-07-13 18:10 2604#准备各安装包,并scp到各节点 pwd /work/lz ... -
Hadoop TaskScheduler浅析
2012-07-13 14:01 895转自:http://hi.baidu.com/_kouu/bl ... -
Hadoop OutputFormat浅析
2012-07-13 14:00 2167转自:http://hi.baidu.com/_kouu/bl ... -
Hadoop InputFormat浅析
2012-07-13 13:57 893在执行一个Job的时候,Hadoop会将输入数据划分成N个Sp ... -
hadoop面试可能遇到的问题
2012-07-13 13:50 1148Q1. Name the most common Inpu ... -
hadoop-0.20.203启用LZO压缩
2012-07-12 16:45 14941.准备工作,安装ant,(编译第三步lzo编码解码时使用,现 ... -
24 Interview Questions & Answers for Hadoop MapReduce developers
2012-07-12 10:12 732A good understanding of Hadoop ... -
Hadoop Job失败解决
2012-06-27 17:07 3062现象:map 某个task始终实行失败,直到超时,attemp ... -
Hadoop的那些事儿
2012-06-25 14:37 677在说Hadoop之前,作为一个铁杆粉丝先粉一下Googl ... -
Hadoop学习总结:Map-Reduce的过程解析
2012-06-25 10:47 807一、客户端 Map-Re ... -
Hadoop集群上使用Lzo压缩
2012-06-21 14:14 1053自从Hadoop集群搭建以来,我们一直使用的是G ... -
hadoop 相关博客推荐
2012-06-04 10:26 816http://www.cnblogs.com/xuqiang/ ... -
hdfs小文件问题
2012-06-04 10:23 739http://www.cloudera.com/blog/20 ... -
hadoop tuning blog
2012-05-24 14:16 8707 Tips for Improving MapReduce ... -
hadoop作业调优参数整理及原理
2012-05-24 13:58 733转自:http://www.tbdata.org/archiv ... -
Kerberos authentication
2012-05-19 21:46 1390转自:http://www.sunchangming.com/ ... -
关于 hadoop slot的一篇转载
2012-05-17 17:12 877版权声明:转载时请以超链接形式标明文章原始出处和作者 ... -
hadoop 优化的一些点
2012-05-17 16:43 805版权声明:转载时请以超链接形式标明文章原始出处和作者 ...
相关推荐
Hadoop hbase hive sqoop集群环境安装配置及使用文档
hadoop hbase_shell操作命令hadoop hbase_shell操作命令hadoop hbase_shell操作命令hadoop hbase_shell操作命令hadoop hbase_shell操作命令hadoop hbase_shell操作命令
hadoop HBaseshell常用shell命令,这是工作中整理的一份文档,使用价值很高
HDP3.1.5源码下载—hadoop hbase hive
hadoop,hbase,zookeeper安装笔记hadoop,hbase,zookeeper安装笔记hadoop,hbase,zookeeper安装笔记
主要讲解 Hadoop Hbase的使用和原理,包括Hbase官方文档的翻译,还有Java对Hbase的操作等。
hadoop hbase从入门到精通 这文档不错, 佩服作者的实力!
里面包含了所有hbase用到的所有jar包,希望能够帮到正在学习hbase开发的小伙伴
国外对hadoop hbase性能测试的研究。
这是一个大牛的学习笔记,讲解详细,思路清晰,按步就班,是学习hadoop hbase的入门资料,值得入门人员拥用!
hadoop-2.7.2-hbase-jar.tar.gz hadoop-2.7.2-hbase-jar.tar.gz hadoop-2.7.2-hbase-jar.tar.gz
详细叙述了hadoop 及hbase的部署过程
Hadoop HBase 的官方文档,内容详细,单个文件mht格式
hadoop+hbase集群搭建 详细手册
hadoop-hbase-hive 伪分布安装
3,ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times 4,ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times 这是我亲自遇到过的错误及解决过程,希望对大家...
徐老师大数据培训Hadoop+HBase+ZooKeeper+Spark+Kafka+Scala+Ambari
hadoop集群配置流程以及用到的配置文件,hadoop2.8.4、hbase2.1.0、zookeeper3.4.12
很多刚入门的同学找不到版本对应关系,这里从官网整理下来,供大家参考 hadoop、hbase、hive版本对应关系.新手指导hadoop、hbase、hive版本对应关系查找表
Hadoop,HBase,Hive,HDFS视频,共44集(完整全套)!!