AWS Kinesisを利用することで、ログ集約サーバをサーバレス化します。 事前準備 EC2インスタンスを作成しておく ① IAM ロールの作成 EC2にIAMロールを作成して割り当てます。 このロールを使用するサービスを選択:EC2 ポリシー:AmazonKinesisFirehoseFullAccess ロール名：EC2-Kinesis-Full-R …
AWS EC2 + Kinesis Firehose + S3でApacheログを集約
タグ: S3
AWS S3 + CodePipeline + CodeBuild + CodeDeploy+ EC2
S3にzipで固めたソースファイルから1台のEC2にデプロイするって構成です。 ① S3バケットの作成 バケット名：bf-deploy-bucket バージョニングを有効化する ② IAMロールの作成 CodeDeploy-Manage-EC2-Role CodeDeployからEC2やAutoScalingを参照・操作する為の …
S3 Elastic Beanstalkで作られたバケットが削除出来ない
Elastic Beanstalkで作られたバケットが削除出来なかった バケットポリシーの編集
|
1 2 3 4 5 |
"Effect": "Deny", ↓変更 "Effect": "Allow", |
Denyとなっている箇所を探して、Allowに書き換えて【保存】を行う。 改めてS3のバケットを削除を行うと成功した。
AWS S3バケットへのCLI操作
コンフィグ定義
|
1 2 3 4 5 6 |
$ sudo aws configure AWS Access Key ID [None]: xxxxxxxxxxxxxx AWS Secret Access Key [None]: xxxxxxxxxxxxxx Default region name [None]: ap-northeast-1 Default output format [None]: json |
バケット作成
|
1 2 |
$ sudo aws s3 mb s3://example.net make_bucket: example.net |
ファイルのアップロード
|
1 |
# aws s3 cp /var/www/vhosts/wpad.example.net/httpdocs/static/ s3://example.net --recursive |
バケットへのWEB公開設定 [crayon-5da6f4b72ea6c3785 …
AWS CLI AWS S3にアップロード
AWS CLIでAWS S3にアップロード ダウンロード 寄稿しました(๑❛ᴗ❛๑ ) AWS CLIのインストール
|
1 |
# curl "https://bootstrap.pypa.io/get-pip.py" -o "get-pip.py" |
|
1 |
# python get-pip.py |
|
1 |
# pip install awscli |
AWS CLI …
Apacheログ分析 Fluentd+S3+Athena
条件 EC2に割り当てるIAMロール AmazonS3FullAccess S3にリージョン米国西部(オレゴン)でバケットを作成 sgapache Athena Location of Input Data Set s3://sgapache25254649/athena_apache/ Amazon Linux2設定 Apache, td- …