今まで２５年ほどデータベースエンジニアとして生きてきたが
技術者として限界を感じた。
なんとかこの業界で生きていきたいので
「データサイエンティスト」を
５０代にして目指してみる。
最終的には組織から離れてフリーランスで食っていきたい...

こんにちは，株式会社Nospare・千葉大学の小林です．
今回はJournal of the Royal Statistical Society Series Aに掲載された論文`Trust in numbers'（Cambridge...

最近データサイエンティストが多くなってきて、めでたいな～、いいことだな～と思っているのですが、多くの人は機械学習寄りの話から入っていくことが多く、統計学から入っていく人は少ないような気もします。

重回帰分析は、おそらく最も多くのデー...

Nospareの佐藤 & Nospare・東京大学の菅澤です．

今回はRue et al. (2009)で提案されたINLA（Integrated Nested Laplace Approximation）を使った大規模デー...

はじめに

千葉大学/Nospareの米倉です．今回は統計学の研究・実務を行う上で今でも僕が参照している教科書を１０冊ほど紹介します．日本語の教科書のいいところは結構ニッチな部分をカバーしてたり，あとはやっぱり読むのが早いので，解...

はじめに

千葉大学・株式会社Nospareの川久保です．今回は，標本調査の分野で用いられるsurvey weightについて説明します．survey weightを用いて，バイアスのかかったサンプルに対して，バイアスを除去した推...

東京大学・株式会社Nospareの菅澤です．
今回は統計学・データサイエンスの効果的な勉強方法（私見）について紹介します．

前提として大学レベルの微積分・線形代数をある程度取得している状況を想定します．


勉強の進め方のポイント
...

こんにちは，株式会社Nospare・千葉大学の小林です．本記事ではGelman and Vehtari (2020)の`What are the most important statistical ideas of the past...

はじめに

Axrossの広報を担当している松田です。

Axross は、エンジニアの"教育"と"実務"のギャップに着目し、「学んだが活用できない人を減らしたい」という想いで、ソフトバンク社内起業制度にて立ち上げたサービスです。...

はじめに

千葉大学・株式会社Nospareの川久保です．今回は，EMアルゴリズムについて解説します．EMアルゴリズムは，欠測が含まれたデータに対する観測データの尤度を最大化するアルゴリズムです．


手法の説明


問題設定

...

1 背景

統計学の学習中に LaTeX 関連の探し物をしていた時に見つけました。
直感的に操作できそうだったことを共有したく、まとめました。


2 共有したいこと


① １クリックで Symbol を挿入できる




② ...

重回帰分析をした場合に、説明変数間で強い相関があること。かなり脅してくるWeb記
事が多いのだがどれくらいで「強い」と見なされるのか、どのような不具合があるかについ
ては記事によってふにゃふにゃ違う。
多重共線性の指標としてはVIF値...

東京大学・株式会社Nospareの菅澤です．
今回から「外れ値とロバスト推定」のテーマでいくつか記事を書いていこうと思います．

具体的には以下の内容について解説していく予定です．


一次元データの外れ値処理
多次元データおよび回帰...

こんにちは，株式会社Nospare・千葉大学の小林です．今回はMartin, Frazier and Robert (2020)によるベイズ統計における数値計算（Bayesian computation）の進歩の歴史についてまとめた論...

はじめに

千葉大学/Nospareの米倉です．今回はノンパラメトリックな方法（分析で用いる分布を仮定しない）を用いた，探索的データ分析について解説します．ノンパラメトリックな方法を用いることにより，モデルの特定化の失敗の影響を抑...

本当、「こんな甘い考えでよく仕事を貰えるな」と今の会社を見ていて思うので、その状況をつらづらと書こうと思う。
（内心、かなりムカついている）

でも、分かる部分もあるのでどう折り合いをつけたらいいか、自分自身がわからない。
世間にも自...

はじめに

千葉大学・株式会社Nospareの川久保です．今回は初学者向けの内容になりますが，線形回帰モデルの小ネタ集です．私が学部生に講義を行ったりゼミを受け持ったりしているなかで，学生がつまずきやすかったり，気付きにくかったり...

はじめに

東京工業大学/株式会社Nospare の栗栖です．この記事では関数データに対するノンパラメトリック回帰分析について紹介します．この記事の内容は主に Masry(2005), Ferraty and Vieu(2006)...

東京大学・株式会社Nospareの菅澤です．
前回の外れ値とロバスト推定(1)に引き続き，今回は線形回帰モデルにおける外れ値とロバスト推定について解説していきます．


外れ値と高レバレッジ点

簡単な単回帰モデルの例を考えます．まず...

統計検定２級の取得向けに整理したチートシートです。

参考としたのは下記の統計検定２級対策の公式本と入門統計学です。




主に確率、統計的推定、統計的仮説検定、線形回帰を中心に記載しています。また、統計検定２級の受験時の（多少参考...