Google Cloud 【GCP】BigQueryの料金節約術~オンデマンドクエリの上限値を設定する~ 今回はBigQuery利用の料金を抑える一つの方法として、「オンデマンドクエリの上限値設定」をやってみます。プロジェクト/クエリごとの上限値を設定し利用料金の増加を抑えるほか、意図しない大規模クエリによる利用料金の急増を抑える効果もあります。ぜひご覧ください。 2024.08.28 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】BigQuery のデータマスキング 今回は、BigQuery で機密データを扱う際に欠かせない「データマスキング」について書きます。実装する中で、権限周りでかなり悩んだ部分もあったので記載しておきます。お役に立てると嬉しいです。 2024.08.27 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】BigQuery のアクセス制御まとめ その② 本ブログはBigQuery のアクセス制御まとめ その①の続編です。今回は、BigQueryの「列と行のアクセス制御」について書きます。 2024.08.22 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】BigQuery のアクセス制御まとめ その① BigQuery の様々なレベルでのアクセス制御についてまとめます。今回のブログ(その①)では、リソースレベルでのアクセス制御について詳しく見ていきます。 2024.08.22 Google Cloudクラウドソリューションデータ分析・活用基盤
イベント案内 Informatica World Tour 2024 Tokyoへ出展のお知らせ インフォマティカ・ジャパンが主催するデータマネジメントカンファレンス「Informatica World Tour 2024」が開催されます!SCSKはゴールドスポンサーとして出展し、ミニセッションでの登壇、ブース出展予定です。ご来場をお待ちしております! 2024.08.13 イベント案内データ分析・活用基盤
Google Cloud 【GCP】Cloud FunctionsのCloud StorageトリガーでDataFusionパイプラインを起動 今回は、Cloud Functions とData Fusionを組み合わせて、Cloud Storageバケットの変更を検知しパイプラインを起動する仕組みを構築してみたいと思います。 2024.08.09 Google Cloudデータベースデータ分析・活用基盤
Google Cloud 【GCP】BigQueryでウィンドウ関数(分析関数)を使ってデータ分析してみる 今回は、BigQueryでウィンドウ関数(分析関数)を使ってデータを集約してみたいと思います。テーブル全体ではなく、特定の実行範囲(パーティション)での処理が実行できる便利な機能です。ぜひご覧ください。 2024.08.07 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】Cloud Data Fusion で Wrangler を柔軟に使い倒す Google CloudのData Fusionでパイプラインを構築する機会が多くあり、その中でも「Wrangler」のプライグインを多く使用したので、その際に便利だった機能をご紹介します。 2024.08.06 Google Cloudデータ分析・活用基盤
イベントレポート Informatica World 2024 @Las Vegas 参加レポート インフォマティカの "データマネジメント" の最大カンファレンスの一つである、Informatica Worldに参加してきました! 2024.06.11 AI・MLイベントレポートイベント情報ソリューションデータ分析・活用基盤
イベントレポート 【現地速報②】Snowflake Data Cloud Summit 24 Platform Keynoteまとめ Snowflake Data Cloud Summit 24 初日のOpening Keynoteとは違い、翌日6/4に開催されたPlatform Keynote K2では、主にSnowflakeに関する最新のサービスアップデートが中心に取り上げられました。今回はその第2弾として、本セッションに関する内容を同じく速報でお届けします。 2024.06.05 Snowflakeイベントレポートデータ分析・活用基盤