データ分析・活用基盤 AWS GlueのJobでログの特定の文字だけを置換する
Webアプリで取得しているログを分析に利用する際に、一部の値が他データと異なる表現となっており、データのコピーと合わせて変換をした際の手順を共有できればと思います。
データ分析・活用基盤
データ分析・活用基盤 
データ分析・活用基盤 IDMC（IICS）のCloud Mass Ingestionを利用してFTPサーバからS3にファイル転送する方法
IDMC（IICS）を利用して、FTPサーバからS3にCloud Mass Ingestionという機能を利用してファイル連携する際の備忘録です。IDMCの接続設定ではまりポイントがありました。
データ分析・活用基盤 S3からBigQueryにInformatica Data Loader for Google BigQueryを利用してデータを取り込む方法
２０２２年５月に発表された「Informatica Data Loader for Google BigQuery」を利用して、Amazon S3からBigQueryにデータをロードするまでの備忘録
Google Cloud 【GCP】BigQuery+Dataplexハンズオン受講レポート
こんにちは。最近Google CloudのDataシリーズにはまっている林です。 Google Cloud Day: Digital '22の2週目に開催されたハンズオン祭のうち、『データエンジニア向けBigQuery + Dataplex...
データ分析・活用基盤 DynamoDBにSQLを発行してデータを可視化する方法
DynamoDBのデータを可視化したいことってありますよね。可視化といえばQuickSightですが、これはDynamoDBを直接参照できません。DynamoDB可視化のために比較的簡単そうな方法を試したので、その実現手順を紹介します。
データベース Amazon DynamoDB のデータを定期的に Amazon Athena テーブルにする [AWS CloudFormation テンプレート付き]
Amazon S3 にあるデータを定期的に Amazon Athena テーブルにする方法を紹介します。別記事で Amazon DynamoDB のデータを Amazon S3 に定期的にエクスポートする方法を紹介しておりまして、その続編記事となります。
AWS 【AWS認定】AWS Certified Data Analytics Specialty学習メモ特集① ～概要編～
過去に受験したAWS Certified Data Analytics Specialtyの勉強方法をまとめていきたいと思います。
本記事は勉強方法と概要です。
AWS 【AWS認定】AWS Certified Data Analytics Specialty学習メモ特集② ～Storage(格納)/Processing(処理)編～
AWS Certified Data Analytics Specialtyを受験し、分野ごとに抑えておいた方が良い点まとめました。
今回は、Storage(格納)・Processing(処理)編です！
AWS 【AWS認定】AWS Certified Data Analytics Specialty学習メモ特集③ ～Collection(収集)編～
AWS Certified Data Analytics Specialtyを受験し、分野ごとに抑えておいた方が良い点まとめました。
今回は、Collection(収集)編です！
AWS 【AWS認定】AWS Certified Data Analytics Specialty学習メモ特集④ ～Analytics(分析)/Visualization(可視化)編～
AWS Certified Data Analytics Specialtyを受験し、分野ごとに抑えておいた方が良い点まとめました。
今回は、Analytics(分析)、Visualization(可視化)編です！