01/06/2024 / 最終更新日時 : 01/14/2024 生成AI/GPT 推測統計学 【統計検定】確率分布のモーメント(積率)母関数完全ガイド|導出チートシート こんにちは、青の統計学です。 今回は、統計検定のチートシート番外編として、確率分布についてまとめようと思います。 各確率分布のモーメント母関数(積率母関数)が求められると、期待値と分散が計算できるようになります。 計算量 […]
10/12/2023 / 最終更新日時 : 04/29/2024 生成AI/GPT 大学数学 【最短】統計検定2級合格ロードマップとチートシート|おすすめの本について こんにちは、青の統計学です。 今回は、統計検定2級を合格するために参考になる本とチートシートをご紹介します。 統計検定準一級については以下をご覧くださいませ。 【最短合格】統計検定準一級のチートシート|難易度や出題範囲に […]
09/03/2023 / 最終更新日時 : 02/02/2024 生成AI/GPT ベイズ 【第2弾】統計検定準1級のチートシート|最短合格への道 こんにちは、青の統計学です。 こちらの記事だけでは、紹介しきれない内容があったため第二弾のチートシートになります。 【最短合格】統計検定準一級のチートシート|難易度や出題範囲について 統計検定2級はこちら→【最短】統計検 […]
08/06/2023 / 最終更新日時 : 01/07/2024 生成AI/GPT 大学数学 【最短合格】統計検定準一級のチートシート|難易度や出題範囲について こんにちは、青の統計学です。 今回は、統計検定準一級のチートシートをご紹介します。 第二弾はこちら→【第2弾】統計検定準1級のチートシート|最短合格への道 統計検定2級はこちら→【最短】統計検定2級合格ロードマップとチー […]
11/11/2023 / 最終更新日時 : 03/31/2024 生成AI/GPT 推測統計学 【やや細かい】G検定のチートシート|最短合格 こんにちは、青の統計学です。 今回は、ディープラーニングG検定のチートシートをご紹介します。 ただ、G検定で扱う主要内容だとすでに青の統計学にほぼ網羅されております。 今回は中でも細かい項目を紹介するという「ある程度学習 […]
01/08/2023 / 最終更新日時 : 04/28/2024 生成AI/GPT 大学数学 【統計検定】フィッシャー情報量とクラメール・ラオの不等式について解説|python こんにちは、青の統計学です。 今回は、正規分布を例に取って、フィッシャー情報量とクラメール・ラオの不等式について深掘りできればと思います。 統計検定準一級の試験範囲にもなっておりますので、この機会に是非理解していきましょ […]
09/14/2022 / 最終更新日時 : 12/10/2023 生成AI/GPT 情報技術者試験 【忙しい人のための】基本情報・応用情報の午前チートシート|総集編 このコンテンツは、基本情報技術者試験・応用情報技術者試験に挑む方向けの午前チートシートです。 前日や試験直前に一瞬見るだけでも良いと思います。「おかげで2問解けた!見といて助かった!」となるコンテンツを目指します。 何の […]
09/04/2022 / 最終更新日時 : 10/25/2022 生成AI/GPT 情報技術者試験 【試験直前ッ】基本情報・応用情報の午前チートシート|セキュリティ編 このコンテンツは、基本情報技術者試験・応用情報技術者試験に挑む方向けの午前チートシート(随時更新)です。 前日や試験直前に一瞬見るだけでも良いと思います。「おかげで2問解けた!見といて助かった!」となるコンテンツを目指し […]
06/20/2022 / 最終更新日時 : 01/14/2024 生成AI/GPT Python 【統計検定準一級】ランダムウォークとマルチンゲールの話。 こんにちは、青の統計学です。 統計検定準一級では、「この確立過程Sは、マルチンゲールかどうか?」という問題が出ることがあります。 マルコフ性と並んで登場する「マルチンゲール」に、とっつきにくさを感じた方も多いと思います。 […]
06/15/2022 / 最終更新日時 : 02/11/2024 生成AI/GPT 推測統計学 【F値とは】分散分析による検定の多重性について|統計検定準1級 統計検定準一級では、2級同様「分散分析」の内容が出てきます。 今回は、前回と視点を変えた「検定の多重性」について解説します。 例題を通して理解していきましょう。 *確実に理解するために、ある程度時間をかけてみましょう。 […]
05/30/2022 / 最終更新日時 : 01/13/2024 生成AI/GPT Python 【統計検定】ポアソン過程をわかりやすく解説|待ち行列理論 こんにちは、青の統計学です。 今回は統計検定準一級から登場する確立過程の一つ「ポアソン過程」について解説いたします。 このコンテンツに全て詰まっているのでブックマーク推奨です! ポアソン過程とは(poisson proc […]
05/06/2022 / 最終更新日時 : 10/27/2023 生成AI/GPT 統計検定&基本応用情報 青の統計学へようこそ。 こちらでは、統計検定や情報処理技術者試験に興味がある方におすすめのコンテンツを紹介しています。 統計検定2級を初歩から勉強したい方へ チートシートはこちら 【最短】統計検定2級合格ロードマップとチ […]
04/29/2022 / 最終更新日時 : 11/11/2023 生成AI/GPT 推測統計学 【統計検定2級で最も厄介(主観)】分散分析を解説します② さて、前回の記事に続いて分散分析を解説していきます。見ていない方は、是非ご確認ください。 記事1:【統計検定2級で最も手強い(主観)】分散分析について解説します① まずはおさらいからです。 統計検定では、「分散分析」とい […]
04/24/2022 / 最終更新日時 : 01/13/2024 生成AI/GPT 推測統計学 【統計検定2級で頻出】歪度と尖度を実例を通して解説|python こんにちは、青の統計学です。 今回は尖度と歪度という2つの統計量をみてみましょう。 Rとpythonどちらのコードも用意してあります。 歪度/skewness $$\frac{E[(x-μ)^3]}{σ^3}$$ 統計検 […]
01/13/2024 / 最終更新日時 : 03/24/2024 生成AI/GPT ベイズ 【完全ガイド】MCMC法についてわかりやすく解説|ベイズ推定 こんにちは、青の統計学です。 今回は、ベイズ理論を使ったパラメータ推定手法であるMCMC法(Markov Chain Monte Carlo法 マルコフ連鎖モンテカルロ法)について解説いたします。 ベイズの定理から丁寧に […]
12/01/2023 / 最終更新日時 : 03/20/2024 生成AI/GPT 因果推論 【A/Bテストなし】競合施策の効果を推定したい|因果推論と時系列解析 こんにちは、青の統計学です。 今回は、業務で行き詰まった部分をまとめてみました。何かの役に立てたら幸いです。 因果推論を使ったアプローチと時系列解析を使ったアプローチをご紹介します。 ケース|同業の施策の自社影響を知りた […]
04/22/2023 / 最終更新日時 : 12/17/2023 生成AI/GPT Python 【統計学】分散不均一だと何が問題なのか|不偏性とガウスマルコフ性について こんにちは、青の統計学です。 今回は、分散均一と分散不均一について解説いたします。 推定量期待値の分散に関わる問題で、検定方法についても触れようと思います。 各種検定のチートシートは以下をクリック! 【最短】統計検定2級 […]
12/30/2022 / 最終更新日時 : 01/19/2024 生成AI/GPT 推測統計学 【仮説検定】p値をゼロから解説(第一種の過誤,第二種の過誤,検出力) こんにちは、青の統計学です。 p値や有意水準の意味を正しく理解しているでしょうか? 実験計画や分析報告等で、正しく指標を使うためにも統計的仮説検定の正確な理解はとても大事です。 結論を語りますが、P値や有意性は、効果の大 […]
12/23/2022 / 最終更新日時 : 04/13/2024 生成AI/GPT Python 【XGB】GridSearchを使いつつ特徴量重要度を知りたいッ‥!|python 決定木系のアルゴリズムには、feature_importanceというメソッドがあります。 ただ、GridSearchなどのハイパーパラメーターチューニングと一緒に行うと、 「GridSearchCVには、feature […]
12/20/2022 / 最終更新日時 : 04/27/2024 生成AI/GPT Python 【判別問題】サポートベクトルマシン(SVM)の仕組み|python 今回は2値の判別問題で効果を発揮する、サポートベクトルマシン(support vector machine)について解説いたします。 数理最適化も扱うことになるのでいい勉強になると思います。 非線形分離に関しては以下のコ […]
07/27/2022 / 最終更新日時 : 04/22/2024 生成AI/GPT NLP 【自然言語処理】検索クエリをベクトル空間に写像してクラスタリングしたい こんにちは、青の統計学です。 筆者の業務で使うので、勉強がてらまとめていきます。 参考となるコードも紹介していますので、ぜひ最後までご覧ください。 タスクについて|検索クエリの分析について 以下のようなことに挑戦してみま […]
07/23/2022 / 最終更新日時 : 03/20/2024 生成AI/GPT Python 【外れ値に対処】順位相関係数と相関係数の違いについて | python 相関係数は、外れ値があると大きく値が変わってしまうという特徴があり、正確な関係の把握が難しい場合があります。 そこで、外れ値に対処できる頑健(ロバスト)な相関係数が必要とされます。 それが、スピアマンの順位相関係数と呼ば […]
07/15/2022 / 最終更新日時 : 04/29/2024 生成AI/GPT Python 【非等分散編】pythonでWelch(ウェルチ)のt検定をやってみた 2標本問題において、標本間の母分散が等しいという等分散の仮定は、限られた場でしか信憑性がありません。 今回は、標本間の母分散が異なるときに使えるWelchのt検定を学びましょう。 等分散の仮定を置いた2標本問題の方が簡単 […]
07/05/2022 / 最終更新日時 : 01/07/2024 生成AI/GPT Python 【周期性を掴もう】pythonでコレログラムを書いてみましょう ヒストグラムや折れ線グラフなどはよく耳にしますが、「コレログラム」は聞いたことがないかたも多いと思います。 今回は統計検定2級や準一級でよく出る「コレログラム」についてまとめてみました。 統計検定のチートシートは以下をク […]
06/30/2022 / 最終更新日時 : 01/07/2024 生成AI/GPT 推測統計学 【期待値の応用】モーメント母関数(積率母関数)について 統計検定準一級には、積率母関数についての問題があります。 マクローリン展開や合成関数の微分の知識が必要なことから、避けられがちですが、使う分には便利なものです。 今回は、モーメント法と積率母関数について解説します。 統計 […]
06/28/2022 / 最終更新日時 : 04/28/2024 生成AI/GPT 推測統計学 【等分散の仮定】2標本問題ってなんだ?|python 確率変数が2つ登場するため、難しいですが、応用上用いられることが多いのが「2標本問題」です。 中でも今回は、二つの確率変数が同一の分散であると仮定した「等分散の仮定」に基づいて解説していきます。 等分散の仮定が認められな […]
06/15/2022 / 最終更新日時 : 04/27/2024 生成AI/GPT 大学数学 【線形代数】固有値や固有ベクトルは機械学習にどう使われているのか|主成分分析 こんにちは、青の統計学です。 今回は、前回大好評だった「線形代数がデータサイエンスにどう使われているのかシリーズ」の第二弾です。 大学数学で勉強した固有値や固有ベクトルが一体何の役に立っているのか…対角化で冪 […]
06/12/2022 / 最終更新日時 : 12/10/2023 生成AI/GPT 因果推論 【共変量の罠】シンプソンのパラドクスについて 「相関関係はあるけど、因果関係があるとは限らない」ということは、統計学を学んでしつこく聞いてきたでしょう。 今回は、ある種「因果はあるが、相関がなく見えてしまう」という「シンプソンのパラドクス」について解説いたします。 […]
06/08/2022 / 最終更新日時 : 01/27/2024 生成AI/GPT ベイズ 【GLMM】一般化線形混合モデルについて解説|R こんにちは、青の統計学です。 GLMMを学ぶ前には、固定効果とランダム効果(変量モデル)、そしてGLM(一般化線形モデル)を理解しておく必要があります。 まだ理解が足りてない方には、まず先に以下のコンテンツをご覧ください […]
06/04/2022 / 最終更新日時 : 01/08/2024 生成AI/GPT 推測統計学 【例題つき】正規分布(ガウス分布)の確率密度について|R 二項分布やポアソン分布のようなカウントデータを扱う離散分布の他に、連続データを扱う連続分布があります。 今回は、連続分布の代表格である「正規分布」について扱います。 確率密度に関する例題とともに、分布の再生性についても取 […]
05/13/2022 / 最終更新日時 : 04/28/2024 生成AI/GPT Python 【python/Rコードつき】標準誤差を例題を通して解説。 統計検定などで、信頼区間を求めることは多くあります。 そこで必要なのが標準誤差という概念です。 分布によって誤差の作り方が異なったりするため厄介です。 丁寧に学んでいきましょう。 標準誤差(standard error) […]
05/01/2022 / 最終更新日時 : 01/13/2024 生成AI/GPT 推測統計学 【n-1で割る理由】不偏分散と不偏性についてわかりやすく解説 不偏分散とは、不偏性を持つ分散のことです。 まず、不偏性について詳しく理解する必要があります。 分散から理解したい方はこちらをご覧ください。 【高校数学でわかる】分散と標準偏差とは?|散らばりの指標 統計検定のチートシー […]
04/23/2022 / 最終更新日時 : 01/13/2024 生成AI/GPT Python 【統計学】ポアソン分布についてわかりやすく解説 こんにちは青の統計学です。 今回はポアソン分布について解説します。 確率分布には、離散確率分布と連続確率分布の2種類がありますが、ポアソン分布は、離散確率分布の一つです。 ポアソン分布(poisson dis […]