ablog

不器用で落着きのない技術者のメモ

2021-08-23から1日間の記事一覧

CentOS7 に SSM Agent をインストールする

AWS

CentOS 7 に SSM Agent をインストールして、セッションマネージャーでログインしてみたメモ。 SSM Agent をインストールする ここではリージョンは ap-northeast-1 を指定している。 $ sudo yum install -y https://s3.ap-northeast-1.amazonaws.com/amazon…

AWS CLI 1.4.4 で S3 の VPC エンドポイント(Interface型)を使って S3 にアップロードできる

AWS

AWS CLI 1.4.4 で S3 の VPC エンドポイント(Interface型)を使って S3 にアップロードできることを確認したメモ。 EC2 インスタンスを準備する EC2インスタンス(CentOS7)を Public Subnet に作成する $ cat /etc/system-release CentOS Linux release 7.…

ダブルクオート引用符の CSV を Glue クローラでテーブル作成時に認識させる

AWS

Glue クローラでテーブル作成後にテーブルを編集する。 Serde シリアル化ライブラリを org.apache.hadoop.hive.serde2.OpenCSVSerde に変更 Serde パラメータから field.delim : , を削除 Serde パラメータに以下を追加 escapeChar : \ quoteChar : " separa…