2024-10

これまでデータ分析環境としては、VSCode＋Pythonを使ってきましたが、AIによるコード作成支援機能を搭載したCursorというコードエディタが流行っていると耳にしたので、PCを入れ替えたタイミングで、Cursor＋Pythonによる...

Snowflakeで分析・集計に役立つSQLの関数一覧をまとめました。分析業務に必要な基本的な集計関数はもれなく存在しますが、AUC、AR、エントロピー、カイ2乗値等の統計値を算出する関数は、組み込み関数にはなく、ユーザー定義関数（UDF）...

ユーザー定義関数（UDF）の引数には、文字列や数値を指定することができますが、配列の引数も指定できます。引数に配列を使うことで、UDFで実現できる処理の幅も広がります。なおUDFの基本について知りたい場合は、こちらの記事を参照ください。この...

分析業務をしていると、単方向リストのデータを扱うことがあります。単方向リストとは、各要素が次または前の要素の情報を保持しており先頭から末尾まで数珠繋ぎに要素が並んでいるリストのことです。実際のデータで説明すると、A、B、Cという各要素が、A...

分析・集計業務では、報告書やレポートを作成するために、各種集計や検証結果をCSVファイルとしてエクスポートできると便利です。SnowflakeでCSVファイルをエクスポートする方法としては、WebUIを使う方法と、SnowSQLを使う方法の...

分析のためのデータ加工処理では、特定の条件で行レコードの重複を除くといった処理をよく行います。例えば、更新日付を持っているお客様属性情報からお客様毎に日付が一番新しいレコードを取得する処理、複数の契約情報から契約期間が一番長いレコードを取得...

ユーザー定義関数（UDF）を使うことで分析業務のデータ加工や集計作業の効率を上げることが可能です。例えば、同じ構文を繰り返すことでSQLが冗長となるケースでは、UDFを利用することで可読性・メンテナンス性があがります。また、Snowflak...

Snowflakeでは、WebUIというブラウザベースのツールを使ってデータの加工・集計を行います。ただ、このWebUIツールをWEBで調べても、初心者に分かりやすく説明してくれるページがありませんでした。そこで、この記事ではWebUIのイ...

Snowflakeのストアドプロシージャには、戻り値にテーブル情報を指定できる機能があることをご存じでしたか？この戻り値にテーブル情報を指定できる機能はとても便利です。これまではストアドプロシージャで処理を実行し、結果についてはSelect...

SASを初めて使った時の感想は、「速い！」でした。私にとってはSASは、何千万件というデータを、Oracleなどのデータベースより早く処理ができるし、柔軟にデータ加工もできる、そして統計解析や分析もできる最高のツールです。そんな私ですが、会...