データ分析/データサイエンス

日本行動計量学会・日本心理学会 2025年 大会参加レポート

ドワンゴのデータサイエンティストによる心理統計関連の学会参加レポートです。

NumPyroによる項目反応理論と垂直尺度化の実装【実践編】

ベイズ統計モデリングライブラリNumPyroによる、項目反応理論(IRT)と垂直尺度化の実装ガイド【実践編】。異なる学年のテスト結果を同一尺度上で比較可能にする統計モデルの構築と、その具体的な実装コードをステップバイステップで詳しく解説します。

BigQueryで機械学習 時系列推移の異常を検知する

はじめに ドワンゴ教育事業でデータアナリストとして働いている小林です。 ZEN大学の開学やR高校の開校で今年の春は例年にもまして賑やかなものでした。ライブストリーミングされていた入学式やオリエン番組などを眺めていると皆様の人生の節目に立ち会えた…

データ基盤をDataformで構築して気づいたこと

データ基盤をDataformで構築して気づいたことをまとめました。

BigQueryでJSON文字列を攻略する関数たち

はじめに ドワンゴ教育事業でデータアナリストとして働いている小林です。 ドワンゴ教育事業におけるデータアナリストは企画開発組織の一員としてKPI可視化やレポーティングなどをメイン業務としています。個人的には新たなサービスが生まれる瞬間のお仕事が…

機械学習パイプラインLuigiのタスク同士の関係を良い感じに可視化する方法

はじめに ドワンゴ教育事業でデータサイエンティストとして働いている中井です。 この記事では、PythonのパイプラインパッケージであるLuigiで構築したパイプラインにおいて、それを構成するタスク間の依存関係・タスクのグループ間(task_namespace で分け…

BigQuery縦持ちデータを動的に横持ちデータにする方法

はじめに ドワンゴ教育事業でデータアナリストとして働いている小林です。 一般的にデータアナリストはデータの収集・分析を通して組織の意思決定を支援する役割を期待されることが多く、ドワンゴ教育事業における私のミッションもKPI動向の可視化やダッシュ…