AWS Lake Formationの権限付与をCLIでやる：JSONファイルで「レビューできる権限管理」にする
CloudFormationで検証用のデータレイクを立て、権限の付与・確認・剥奪・片付けまで一通り回した記録です。
データ分析・活用基盤
AWS 
AWS PDF解析・テキスト抽出ライブラリを変えたら処理速度が激速になった件
AWS Lambda 関数で PDF をテキスト変換するのに pdf_oxide というライブラリが高速で良かったという話です。
Snowflake Snowflakeのエージェント評価機能を触ってみた ～Snowflake CoWorkのテスト自動化へ～
Snowflakeのエージェント評価機能について説明しています。
Google Cloud 【Google Cloud】Knowledge Catalogで既存データをAI Readyに変える
既存のデータ基盤がAI Readyでない状態だからといって、AI活用を諦める必要はありません。Knowledge Catalogを導入することで、既存資産を活かしたまま、AIエージェントが自律的に社内データを探索・活用できる「AI Ready」な環境へと進化させることが可能になります。
AWS AWS Step Functions Map ステート分散モードで任意の Amazon S3 バケットのフォルダーにあるオブジェクトを並列処理する
掲題のリソースを実装したときに気付いた注意点を紹介します。
Snowflake Snowflake Cortex AIを活用して画像分類をやってみた with Cortex Code
SnowflakeのAIサービス「Cortex AI」を活用して、非構造データの代表格である画像データの分類に挑戦してみました。
Google Cloud あるシンガーの全288曲の歌詞をベクトル化したら、数学的に『呪い』が検出された話
AIは「情念」を座標にできるか？最新のGemini Embedding 2を使い、とある女性シンガーの歌詞全288曲を3,072次元のベクトル空間に展開。数学的に導き出された4つのクラスタが示す、彼女の楽曲の多面性とは。マルチモーダル対応や次元の柔軟性など、最新モデルの凄さをファン兼技術者の視点でレポします。
AWS Amazon S3 Tablesを触ってみた
Amazon S3 Tablesの簡単な特徴やUpsert処理やタイムトラベルの機能について実際に触ってみた感想を踏まえた記事にしています。
データ分析・活用基盤 【データドリブン経営】実現のための5つのステップ
SCSKが提供しているクラウドデータ活用サービスでは、データドリブン経営実現のためのステップを、「活用基盤」「可視化・分析」「連携・蓄積」「マネジメント」「高度活用」の5つに定義しています。各ステップを実現するためのポイントと、データ基盤のベースとなるモダンデータスタックの考え方についてご紹介します！
AWS 【ここを気にした!】Amazon Bedrockを活用したWebクローリング＆名寄せ構想
Webクローリングおよび名寄せの検証において、AWS lambdaとAmazon Bedrockを活用したデータ収集アーキテクチャを検討した際の試行錯誤を整理しました。従来のルールベースのクローリングと比較し、生成AIを用いた柔軟な情報抽出を取り入れることで、サイト構造の差異に耐えるデータ収集方式をどのように実現したか、また収集データと既存マスタを突合する名寄せの課題についても紹介します。