迁移aws服务器日志到s3

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了迁移aws服务器日志到s3相关的知识,希望对你有一定的参考价值。

#!/bin/bash

#install s3cmd
cd /etc/yum.repos.d
wget http://s3tools.org/repo/RHEL_6/s3tools.repo
if [ ! -d "/usr/local/scripts/" ] ; then
mkdir -p /usr/local/scripts/;
fi

#upload the migrate logs script to /usr/local/scripts
scp $ATTACH_DIR/migrate-log.sh /usr/local/scripts

echo  "0 */1 * * * /usr/local/scripts/migrate-log.sh > /dev/null 2>&1" >>/var/spool/cron/root

#add crontab entry


#upload backup files to s3

DATE=`date +%Y-%m-%d`


cd /mnt/ephemeral/karaf/data/

tar zcvf web-messaging-service.log.${DATE}tar.gz log

#save a copy to s3
s3cmd put --force web-messaging-service.log.${DATE}tar.gz s3://wms-gameexternal-log/

rm -f /mnt/ephemeral/karaf/data/web-messaging-service.log.${DATE}tar.gz
find /mnt/ephemeral/karaf/data/log/ -type f  -name   "karaf.log.20*" -exec rm -f {} \;

本文出自 “小V运维之路” 博客,请务必保留此出处http://victor2016.blog.51cto.com/6768693/1914459

以上是关于迁移aws服务器日志到s3的主要内容,如果未能解决你的问题,请参考以下文章

亚马逊 s3 / 其他 AWS 服务上的操作日志

如何使用rclone从AWS S3迁移到IBM COS - part 1

golang aws-sdk-go 之 s3 服务

AWS Glue 数据从 S3 迁移到 Redshift

从 AWS Redshift 到 S3 的 AWS Glue ETL 作业失败

如何使用rclone从AWS S3迁移到IBM COS - part 2 - 同步腾讯云对象存储