Google Cloud 【GCP】BigQueryの料金節約術~オンデマンドクエリの上限値を設定する~ 今回はBigQuery利用の料金を抑える一つの方法として、「オンデマンドクエリの上限値設定」をやってみます。プロジェクト/クエリごとの上限値を設定し利用料金の増加を抑えるほか、意図しない大規模クエリによる利用料金の急増を抑える効果もあります。ぜひご覧ください。 2024.08.28 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】BigQuery のデータマスキング 今回は、BigQuery で機密データを扱う際に欠かせない「データマスキング」について書きます。実装する中で、権限周りでかなり悩んだ部分もあったので記載しておきます。お役に立てると嬉しいです。 2024.08.27 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】【AIML】Google Gemmaをローカル環境で動かしてみた。 Google が提供するオープンAIモデルのGemmaについて、その最新情報を使ってみたと合わせて共有します。 2024.08.27 AI・MLGoogle Cloudクラウドソリューション
Google Cloud 【GCP】BigQuery のアクセス制御まとめ その② 本ブログはBigQuery のアクセス制御まとめ その①の続編です。今回は、BigQueryの「列と行のアクセス制御」について書きます。 2024.08.22 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】BigQuery のアクセス制御まとめ その① BigQuery の様々なレベルでのアクセス制御についてまとめます。今回のブログ(その①)では、リソースレベルでのアクセス制御について詳しく見ていきます。 2024.08.22 Google Cloudクラウドソリューションデータ分析・活用基盤
Google Cloud 【GCP】Cloud FunctionsのCloud StorageトリガーでDataFusionパイプラインを起動 今回は、Cloud Functions とData Fusionを組み合わせて、Cloud Storageバケットの変更を検知しパイプラインを起動する仕組みを構築してみたいと思います。 2024.08.09 Google Cloudデータベースデータ分析・活用基盤
Google Cloud 【GCP】BigQueryでウィンドウ関数(分析関数)を使ってデータ分析してみる 今回は、BigQueryでウィンドウ関数(分析関数)を使ってデータを集約してみたいと思います。テーブル全体ではなく、特定の実行範囲(パーティション)での処理が実行できる便利な機能です。ぜひご覧ください。 2024.08.07 Google Cloudクラウドソリューションデータ分析・活用基盤
イベントレポート Google Cloud Next Tokyo ’24に参加してみた Google Cloud Next Tokyo '24に参加してきたので、インベントの様子や感想を投稿します。Google Cloud Next Tokyo '24は2024年8月1日・2日にパシフィコ横浜ノースで開催されたGoogle Cloudのカンファレンスイベントです。 2024.08.06 AI・MLGoogle Cloudイベントレポートイベント情報クラウドソリューション
Google Cloud 【GCP】Cloud Data Fusion で Wrangler を柔軟に使い倒す Google CloudのData Fusionでパイプラインを構築する機会が多くあり、その中でも「Wrangler」のプライグインを多く使用したので、その際に便利だった機能をご紹介します。 2024.08.06 Google Cloudデータ分析・活用基盤
Google Cloud Cloud FunctionsのCloud Storageトリガーをフォルダレベルで指定したい!! 先日、Dialogflow CXのAgentからのテストケース作成を自動化していて、「あるフォルダにファイルがアップロードされたら起動するCloud Functionsを作りたい」とふと思いました。そこで今回はバケットレベルで指定するCloud Storageトリガーをどうにかしてフォルダレベルで指定できないか調べてみました。 2024.08.05 Google Cloudアプリケーション開発クラウドソリューション