06/19/2022 / 最終更新日時 : 10/31/2023 bluest Python 【python】ガウス過程回帰の仕組みと実務での応用|ノンパラメトリック機械学習 こんにちは、青の統計学です。 今回はガウス過程回帰について解説いたします。 製造業の現場など、n=20やそこらぐらいのデータセットで予測を行う必要がある時によく使われます。 ガウス過程は少数データとの相性がよく、予測値の […]
06/18/2022 / 最終更新日時 : 09/09/2024 bluest Python 【python】共分散分析(ANCOVA)の基礎から応用まで|因果推論 共分散分析 共分散分析は、調整平均を用いて、共変量(covariate)の影響を考慮した上で、群間の平均値の差を検定する方法です。 分散分析(ANOVA)と似ていますが、共分散分析は共変量を考慮する点で異なります。 →こ […]
06/15/2022 / 最終更新日時 : 04/27/2024 bluest 大学数学 【線形代数】固有値や固有ベクトルは機械学習にどう使われているのか|主成分分析 こんにちは、青の統計学です。 今回は、前回大好評だった「線形代数がデータサイエンスにどう使われているのかシリーズ」の第二弾です。 大学数学で勉強した固有値や固有ベクトルが一体何の役に立っているのか…対角化で冪 […]
06/15/2022 / 最終更新日時 : 05/05/2024 bluest 推測統計学 【F値とは】分散分析による検定の多重性について|統計検定準1級 統計検定準一級では、2級同様「分散分析」の内容が出てきます。 今回は、前回と視点を変えた「検定の多重性」について解説します。 例題を通して理解していきましょう。 *確実に理解するために、ある程度時間をかけてみましょう。 […]
06/13/2022 / 最終更新日時 : 10/14/2024 bluest ベイズ 【ベイズ因子】オッズ比の使われ方を紹介します こんにちは、青の統計学です。 今回はロジスティック回帰の解釈で定番の、オッズ比について考えていきます。 オッズ比は二つのカテゴリに分けられるデータに対して有用な指標であり、特に、疾患や事象が発生する確率について研究する際 […]
06/13/2022 / 最終更新日時 : 11/14/2024 bluest 大学数学 【完全攻略】多重共線性をわかりやすく解説 多重共線性(Multicollinearity)とは 重回帰分析を勉強していると、最小二乗法の仮定の一つに「多重共線性がないこと」と見たことがあると思います。 冪乗項や交互作用項などを説明変数に入れて必然的に生じる多重共 […]
06/08/2022 / 最終更新日時 : 11/03/2024 bluest ベイズ 【GLMM】一般化線形混合モデルについて解説|R こんにちは、青の統計学です。 GLMMを学ぶ前には、固定効果とランダム効果(変量モデル)、そしてGLM(一般化線形モデル)を理解しておく必要があります。 まだ理解が足りてない方には、まず先に以下のコンテンツをご覧ください […]
06/06/2022 / 最終更新日時 : 11/07/2024 bluest ベイズ 【尤度って?】尤度関数と最尤推定量の解説と例題 確率分布のパラメータ\(θ\)を推定する方法の一つとして、最尤推定というものがあります。 最尤推定には、尤度関数を使うことが必須です。まずは尤度関数については見てみましょう。 尤度(likelihood)について 抑えて […]
06/04/2022 / 最終更新日時 : 09/08/2024 bluest 大学数学 【例題つき】正規分布(ガウス分布)ついてわかりやすく解説 こんにちは、青の統計学です。 二項分布やポアソン分布のようなカウントデータを扱う離散分布の他に、連続データを扱う連続分布があります。 今回は、連続分布の代表格である「正規分布」について扱います。 確率密度に関する例題とと […]
06/03/2022 / 最終更新日時 : 09/14/2024 bluest 推測統計学 【モデル選択】AIC(赤池情報量基準)についてわかりやすく解説 AIC(赤池情報量基準) モデルを比較する時に、観測したデータとの当てはまりの良さで判断することがあります。 これは最大対数尤度で考えています。 「対数尤度が大きいモデルが良い」と言うのは、一つの軸ではありますが複雑なモ […]
06/03/2022 / 最終更新日時 : 09/16/2024 bluest Python ロジスティック回帰についてわかりやすく解説【二項分布】【統計検定】 ロジット関数とロジスティック関数 こんにちは、青の統計学です、 今回は、分類タスクの王道「ロジスティック回帰」について解説していきます。 しっかり復習したい方は、以下の記事をご覧ください。 基本は、線形回帰の拡張でしたね […]
05/31/2022 / 最終更新日時 : 01/20/2023 bluest Python 【少ないデータを多く見せる】ブートストラップ法について|R 今回は、ブートストラップ法について解説します。 ブートストラップ法(bootstrap method) ブートストラップ法とは、乱数を使って何らかの確率分布を予測する方法です。大事なのは、「重複を許し」てデータセットを複 […]
05/30/2022 / 最終更新日時 : 11/17/2024 bluest 推測統計学 【統計検定2級】第一種の過誤と第二種の過誤について 今回は、統計検定2級で頻出の「第一種の過誤(type I error)と第二種の過誤(type II error)」について解説します。 仮説検定では、比較するモデル同士を帰無仮説と対立仮説に分けます。パラメーター数が少 […]
05/27/2022 / 最終更新日時 : 11/16/2024 bluest Python 【汎用性抜群】尤度比検定をわかりやすく解説します 尤度比検定(likelihood ratio test) 尤度比検定とは、汎用性の高い統計モデルの検定です。 専門的な用語抜きに説明すると、尤度比検定とは二つのモデルのうち、観測データをよりよく説明するのはどちらだろうか […]
05/24/2022 / 最終更新日時 : 09/16/2024 bluest Python 【GLM】一般化線形モデルをわかりやすく解説|ポアソン回帰 一般化線形モデル(generalized liner model) 今回はGLMと呼ばれる「一般化線形モデル(generalized liner model)」を解説します。 よく似た名前として、分散分析や共分散分析など […]
05/23/2022 / 最終更新日時 : 01/13/2024 bluest Python 【python】分散分析(ANOVA)の基礎から応用まで|統計的仮説検定 こんにちは、青の統計学です。 今回は、分散分析について解説いたします。 分散分析(ANOVA) 分散分析(ANOVA)は、統計学において複数の群間で平均値に有意な差があるかどうかを判断する手法です。 管理人の主観ですが、 […]
05/20/2022 / 最終更新日時 : 05/05/2024 bluest 推測統計学 【統計検定2級】分散分析の信頼区間について|python 統計検定2級の中でも手強い分野の一つ、「分散分析」を扱います。 中でも、分散分析の信頼区間は盲点になることが多いです。例題を通して学んでいきましょう。 分散分析について基礎から学びたい方は、以下のコンテンツをご覧ください […]
05/19/2022 / 最終更新日時 : 09/14/2024 bluest 大学数学 トービットモデルとは?わかりやすく解説【潜在変数】|計量経済学 トービットモデル トービットモデルは、経済学や計量経済学で広く使用される回帰モデルの一種です。 このモデルは、従属変数が一定の値(通常は0)で切断されている状況を扱うためにつくられました。 モデルの基本構造と切断 トービ […]
05/17/2022 / 最終更新日時 : 09/16/2024 bluest 大学数学 【t検定】t統計量(t値)の求め方 t統計量(t value)について解説 t統計量とは、t検定で使う検定統計量のことです。 t統計量は、回帰分析や仮説検定において重要な役割を果たす検定統計量です。特に、回帰係数の統計的有意性を評価する際に用いられます。統 […]
05/13/2022 / 最終更新日時 : 09/13/2024 bluest Python 【統計】標準誤差を例題を通してわかりやすく解説|python 統計検定などで、信頼区間を求めることは多くあります。 そこで必要なのが標準誤差という概念です。 分布によって誤差の作り方が異なったりするため厄介です。 丁寧に学んでいきましょう。 標準誤差(standard error) […]
05/10/2022 / 最終更新日時 : 09/22/2024 bluest Python 【高校数学でわかる】分散と標準偏差をわかりやすく解説|散らばりの指標 分散(variance)と標準偏差(standard deviation) こんにちは、青の統計学です。 今回は、統計の基本である分散と標準偏差について解説していきます。 高校数学でも扱われる内容なので、高度な数学は必要 […]
05/04/2022 / 最終更新日時 : 09/15/2024 bluest 大学数学 層化抽出法の比例配分とネイマン配分をわかりやすく解説【統計検定準一級】 層化抽出法 層化抽出法は、母集団を互いに排反な部分集合(層)に分割し、各層から独立に標本を抽出する方法です。 統計検定二級では、調査手法の一つとして他の方法と比較できているかを問われていましたが、準一級では具体例を通して […]
05/04/2022 / 最終更新日時 : 11/16/2024 bluest 推測統計学 【例題つき】固定効果推定と固定効果モデルについてわかりやすく解説|ランダム効果 固定効果(fixed effect)とは まず、固定効果推定を行うのは「対象を複数時点で観察する」場合です。社会科学の分野では、パネルデータ分析とよく言われていますね。 まず固定効果推定を使うための、モチベーションから確 […]
05/03/2022 / 最終更新日時 : 01/16/2024 bluest Python 【時系列】ARモデルをわかりやすく解説|Yule-Walker法や最尤法も こんにちは、青の統計学です。 今回解説するのは、時系列モデルの基礎であるARモデルです。 まずは数式を見てみましょう。 ARモデル(autoregression model) $$y_{n} = \sum_{j=1}^{ […]
05/01/2022 / 最終更新日時 : 11/17/2024 bluest 大学数学 不偏性と不偏分散についてわかりやすく解説 不偏性(unbiasedness) 不偏分散とは、分散の中でも不偏性を持つ分散のことです。 まずは、不偏性から理解していきましょう。 「不偏性がある」とは、標本平均の期待値が母平均に一致することを指します。 数式で書くと […]
04/29/2022 / 最終更新日時 : 05/05/2024 bluest 推測統計学 【統計検定2級で最も厄介(主観)】分散分析を解説します② さて、前回の記事に続いて分散分析を解説していきます。 統計検定2級に挑戦したい方は、こちらのnoteもぜひご覧ください。(リポストすると割引になります!) 画像をクリックすると記事に飛びます。 分散分析とは まずはおさら […]
04/25/2022 / 最終更新日時 : 05/02/2024 bluest 推測統計学 【統計検定2級で最も手強い(主観)】分散分析について解説します① こんにちは、青の統計学です。 統計検定では、実験計画法の分野で「分散分析」というものがよく出ており、「自由度」や「残差平方和」などの知識が必要で厄介です。 今回は、分散分析について解説いたします。 統計検定2級に挑戦した […]
04/24/2022 / 最終更新日時 : 09/07/2024 bluest Python 【統計検定2級】歪度と尖度をわかりやすく解説|python こんにちは、青の統計学です。 今回は尖度と歪度という2つの統計量をみてみましょう。 モーメントを使った算出式を使っておりますが、尖度と歪度の計算の仕方は色々あります。 統計検定2級に挑戦したい方は、こちらのnoteもぜひ […]
04/23/2022 / 最終更新日時 : 09/16/2024 bluest Python 【統計学】ポアソン分布についてわかりやすく解説 ポアソン分布(poisson distribution) 統計学および確率論で用いられるポアソン分布とは、ある事象が一定の時間内に発生する回数を表す離散確率分布です。 定数\( \lambda > 0\ […]
04/22/2022 / 最終更新日時 : 11/04/2024 bluest Python 【R^2】決定係数をわかりやすく説明|python こんにちは、青の統計学です。 今回は、決定係数について解説します。 決定係数とは、作った回帰モデルはどの程度学習データと当てはまっているのか調べる方法の一つです。 統計検定2級に挑戦したい方は、こちらのnoteもぜひご覧 […]