-
Amazon S3に複数ファイルを一括アップロードする方法を3つ比較してみた
結果、 1.boto3処理時間:839.406888961792 となり、約14分かかりました。 AWS CLIの aws cp s3コマンドで再帰処理 次に、aws s3 cpコマンドの再帰処理をs ...
-
Amazon Rekognitionを使ってS3に保存した画像の性別と年齢を判定する
2022/01/23 -Rekognition, S3
Amazon Rekognition画像分析の使用ケースとして、店内に設置したカメラ画像から顧客の性別や年齢を判定して、顧客分布を集計するといったことがあるかと思います。 判定の手段として機械学習を使う方法がありますが、その中でも今回は ...
-
S3に保存したparquet形式のデータをQuickSightで可視化する
2021/11/30 -Athena, AWS, Glue, QuickSight, S3
概要 前回、APIから取得したJSONデータをparquet形式に変換してS3に保存しました。 今回はS3に保存したデータをAmazon QuickSightで可視化するまでを行います。 AWS Gl ...
-
APIで取得したJSONデータをparquet形式でS3に保存する【Python】
現在、様々な情報源がAPIとして公開されています。 今回は、Pythonを使ってAPIからJSONデータを取得してAmazon S3にparquet形式で保存してみます。 parquetとしたのはCS ...