データ分析・活用基盤

Google Cloud

【GCP】BigQueryの料金節約術~オンデマンドクエリの上限値を設定する~

今回はBigQuery利用の料金を抑える一つの方法として、「オンデマンドクエリの上限値設定」をやってみます。プロジェクト/クエリごとの上限値を設定し利用料金の増加を抑えるほか、意図しない大規模クエリによる利用料金の急増を抑える効果もあります。ぜひご覧ください。
Google Cloud

【GCP】BigQuery のデータマスキング

今回は、BigQuery で機密データを扱う際に欠かせない「データマスキング」について書きます。実装する中で、権限周りでかなり悩んだ部分もあったので記載しておきます。お役に立てると嬉しいです。
Google Cloud

【GCP】BigQuery のアクセス制御まとめ その②

本ブログはBigQuery のアクセス制御まとめ その①の続編です。今回は、BigQueryの「列と行のアクセス制御」について書きます。
Google Cloud

【GCP】BigQuery のアクセス制御まとめ その①

BigQuery の様々なレベルでのアクセス制御についてまとめます。今回のブログ(その①)では、リソースレベルでのアクセス制御について詳しく見ていきます。
イベント案内

Informatica World Tour 2024 Tokyoへ出展のお知らせ

インフォマティカ・ジャパンが主催するデータマネジメントカンファレンス「Informatica World Tour 2024」が開催されます!SCSKはゴールドスポンサーとして出展し、ミニセッションでの登壇、ブース出展予定です。ご来場をお待ちしております!
Google Cloud

【GCP】Cloud FunctionsのCloud StorageトリガーでDataFusionパイプラインを起動

今回は、Cloud Functions とData Fusionを組み合わせて、Cloud Storageバケットの変更を検知しパイプラインを起動する仕組みを構築してみたいと思います。
Google Cloud

【GCP】BigQueryでウィンドウ関数(分析関数)を使ってデータ分析してみる

今回は、BigQueryでウィンドウ関数(分析関数)を使ってデータを集約してみたいと思います。テーブル全体ではなく、特定の実行範囲(パーティション)での処理が実行できる便利な機能です。ぜひご覧ください。
Google Cloud

【GCP】Cloud Data Fusion で Wrangler を柔軟に使い倒す

Google CloudのData Fusionでパイプラインを構築する機会が多くあり、その中でも「Wrangler」のプライグインを多く使用したので、その際に便利だった機能をご紹介します。
イベントレポート

Informatica World 2024 @Las Vegas 参加レポート

インフォマティカの "データマネジメント" の最大カンファレンスの一つである、Informatica Worldに参加してきました!
イベントレポート

【現地速報②】Snowflake Data Cloud Summit 24 Platform Keynoteまとめ

Snowflake Data Cloud Summit 24 初日のOpening Keynoteとは違い、翌日6/4に開催されたPlatform Keynote K2では、主にSnowflakeに関する最新のサービスアップデートが中心に取り上げられました。今回はその第2弾として、本セッションに関する内容を同じく速報でお届けします。