PLOS Biology: The Extent and Consequences of P-Hacking in Scienceを読んだ。 世の中にはp値が小さい(つまり統計的に有意)なデータが尊ばれる傾向がある。そうすると発表される結果は有意なものばかりだし、悪ければ詐称かもしれない。間違った結果を集めてしまうとメタ解析してもバイアスが残る。そこでp-hackの可能性を検定する方法を扱った論文。 のはずなんだけど、知識がないからか「本当にこれでいい」のかという疑問が残った。以下概要。 1. p-hackingとは? 研究者がやりがちなバイアスとしてselection bias、inflation biasがある。selection biasは有意でない実験結果が世に出ないこと。inflation biasはいわゆるp-hackingで、「効果量」が小さいのにサンプルサイズを大きくしたり

誰にもたのまれないので、こちらから勝手にメッセージを送ってしまうよ。のコーナー！ 英語教育学の新M1に送る言葉 自分の研究テーマは本当に統計手法では検討できないかまずよく考えて、本当に無理そうだった場合にのみ質的研究や歴史的手法に進んでほしい 解説 計量研究（統計を使った研究手法）が優れた方法で、質的研究や歴史的アプローチが劣った方法だと言いたいのでは決してありません。 計量研究のほうが「真実」を得られやすいというわけでもまったくありません。 しかし、計量研究は他の手法に比べて特に標準化が進んでいることは事実です。そして、標準化されているので、マスターしさえすれば、あとはあまり頭を使わなくても「間違った結論」に陥りにくくなります。 極端な話、統計がわかるサルがいたとしたら、このサルさんの計量分析は「まあそこそこのクオリティ」になることが期待できます。そして、このサルさんが導き出した結論はふ

概要 世界の甲状腺癌の現状における、長崎大学名誉教授の長瀧重信氏の発言に端を発する議論についてです。その発言は、次のようです。 甲状腺癌と診断され、手術される患者の数は確実に増えているにも関わらず、甲状腺癌の死亡率は減少していません。少なくとも手術される患者の増加に比べて死亡率の減少は、はるかに緩やかです。その結果、「手術しなくても死亡しない患者」が手術されているのではないか、という考えも出てきました。 これについて、twitter上で幾人かの方が、疑問を呈していました。つまり、長瀧氏は何かおかしな事を言っているのではないか、との指摘です。その流れで、sivad氏が、次のような主張をします。 @sivad ちょっと考えればわかるけど、ここでの死亡率は無論甲状腺がんによる死亡率なので、「手術しなくても死亡しない患者を手術」して件数が増えているのであれば、その分の死亡率は確実に減るわけ。それが

2017年1月20日追記：『ダメな統計学――悲惨なほど完全なる手引書』という本が出版されることになった。この本は、ここに掲載されているウェブ版の『ダメな統計学』に大幅に加筆したものだ。ウェブ版の『ダメな統計学』を読んで興味を持った方は、書籍となった『ダメな統計学』をぜひ読んでいただければと思う。書籍版の詳細については「『ダメな統計学――悲惨なほど完全なる手引書』の翻訳出版」という記事をご参照願いたい。 ここに公開する『ダメな統計学』は、アレックス・ラインハート (Alex Reinhart) 氏が書いたStatistics Done Wrongの全訳である。この文章は全部で13章から構成されている。詳しくは以下の目次を参照されたい。 はじめに データ分析入門 検定力と検定力の足りない統計 擬似反復：データを賢く選べ p値と基準率の誤り 有意であるかないかの違いが有意差でない場合 停止規則と

統計の話題で、こういう誤りをよく見るなあ、とか、ここら辺はややこしいなあ、的なものを、エッセイ風に書いてみます。 各トピックの最後に、参考資料を紹介したりします。 色々な話題を扱うので、エントリー全体で、このくらいの知識を持っている層向け、みたいな想定はしていないです。下に行くほど、知っている人向けになる、という感じ。 標本数と標本の大きさ 調べたい集団全体から採り出した個体の数の事を、標本数と書くのをよく見かける。でも正確にはこれは、標本の大きさと言う。この違いは、標本という言葉をどのように捉えるか、に起因するもの。標本を、調べたい集団に属する要素と考えるか、含まれる集合と捉えるか。前者で考えると標本数を使う事になるけれど、抽出した集まりそのものを標本とすれば、標本数とは言えなくなる。で、集合に属する要素の数の事を、集合論では大きさというので、それを踏まえて、標本の大きさと言う。 たとえ

近藤誠氏は「がん放置療法のすすめ」「医者に殺されない47の心得」などの著作で知られる医師である。2014年6月29日に放送された、＜BSフジサンデースペシャル＞『ニッポンの選択』というテレビ番組に、近藤誠氏が出演していた。その中で近藤誠氏が提示した、放置した方が長生きすることを示す乳癌の生存曲線を引用する。 近藤誠氏「これからお見せするのは乳がんで、臓器転移がある患者さんのね、もうstage IVですけれども、治療成績がどう変わったかというと…」 一見しただけでは、抗がん剤を使用する現代の治療よりも、抗がん剤や放射線療法や手術すらなかった100年前のほうが長生きしたように見える。ナレーションでも「何もしない赤のほうが生存率が高いのです」と言っている。しかしながら、放置したほうが長生きできるというのは見せかけだけのものである。それなりの知識がある人がみれば、近藤誠氏によるインチキはだいたい予

どもです。林岳彦＆オメガトライブです。きみは1005%（消費税込） さて。 今回は、前回の記事： 今回は因果関係があるのに相関関係が見られない4つのケースをまとめてみた（前編：検定力が低い） - Take a Risk: 林岳彦の研究メモ のつづきの”中編”になります。本記事では「因果関係があるのに相関関係が見られないケース」の中でも、「交絡・合流点」が関わるケースについて書いていきます*1。 扱う内容の範囲としては、最初の記事： 因果関係がないのに相関関係があらわれる４つのケースをまとめてみたよ（質問テンプレート付き） - Take a Risk: 林岳彦の研究メモ と重複する部分がかなりありますが、今回の記事では、「仮想例のデータ生成」の段階からRでの計算を交えて説明していきたいと思います。（今回はちょっと「R実習」のような趣になるので、Rの読み書きができないと分かりにくい部分が多々あ

こんにちは。林岳彦です。先日、小学生の息子とセブンイレブンに行きました。そこでふと、「あの外壁、あれ本物のレンガじゃなくてただの印刷だから」と息子に教えたところ、それが彼にとっては思いもよらぬことだったようで、実はすべすべとしている外壁に触っては「すっかり騙されてた！（ガーン）」と衝撃を受けていました。小さな子どもをお持ちのみなさま、この世の隠蔽された真実（＝セブンイレブンの外壁は印刷）を彼ら／彼女らに教えてみると面白い反応が期待できるかもですよ！ さて。 今回は、前回の記事の続きとして、確率という概念の「規格」について説明していきたいと思います。 （今回はとても長い上に内容がハードかもしれません。いつもながらすみません。。） 前回の軽いまとめ 前回の記事では： 少なくとも、「確率」とは「可能性を数値で表したもの」である というボンヤリとした出発点から： 「可能である」ということは、「この

興味を持ち続けていた統計解析や、R言語の勉強をはじめました！　まだまだ初歩の初歩ですが、この記事がいつか偉大な一歩になれるように頑張っていく所存ですw まずは、R言語や統計解析に関する入門記事や、モチベーションがアップしそうな記事をまとめていきます！ (02/23 11:00) 初学者の人にお勧めな資料にフォーカスしてまとめ直し 🍮 [スライド] 統計学入門 統計学の全体像をつかむのに最適なスライドです。初歩…とはちょっと呼べないくらい内容が深いです！ 🏈 [スライド] 初めての「R」 統計解析を始めるときにWindowsな方も、Macな方もとっつきやすのが『R』です。このRを完全初心者をターゲットに説明をしていただけている資料です。超わかりやすいです！ 🍄 [デスクトップアプリケーション] R用のIDE: RStudioRStudio RStudioはR言語用のIDEです。Wind

Natureに統計学的検定の問題についてのエッセイが出ていた。フィッシャー、ネイマン、ピアソンの言い争いの紹介も含めて、P値にまつわる議論を短くまとめている。何でも、この世には統計学的に有意であるのに再現性の無い調査や研究は多々あるのだが、統計学的な検定を盲信してしまい考察が疎かになっているせいだそうだ。 P値を扱うときの問題が三つ上げられている。一つは、偽陽性の可能性がP値から連想する以上に高いことだそうだ。統計学的な厳密な議論は説明されていなかったが、例えば帰無仮説が0.5のときに、P値が0.01で有意になったとしても、再現実験では11%以上の確率で再現が得られないそうだ。一つは統計的有意であることに満足して、その効果の大きさを考察しないことがあるそうだ。一つは、P値が有意になるように分析方法を工夫しすぎてしまうケース（P-hacking）があるそうだ。 エッセイでは探索的研究と検証的

accessibility Books Library allowing access to top content, including thousands of title from favorite author, plus the ability to read or download a huge selection of books for your pc or smartphone within minutes DOWNLOAD THIS BOOKS INTO AVAILABLE FORMAT ......................................................................................................................... .....................

お久しぶりです。林岳彦です。もうすぐ『愛なき世界』の日、いわゆる（マイブラッディ）バレンタインデーですね。何かと雑音が多いこの世界ですが、いつでも自分の足元を見つめて行きましょう。 さて。 今回は、以下の： そもそもビジネスの現場ではどういう「レベル」の統計学を使うべきなのか - 銀座で働くデータサイエンティストのブログ 統計学的検定に対するある拒絶反応: ニュースの社会科学的な裏側 A/Bテストのガイドライン：仮説検定はいらない（Request for Comments｜ご意見求む） - 廿TT のあたりの皆様の良記事に触発されて「仮説検定」について何か書いてみようと思いました。で、書こうと思えば色々な側面から書ける気もするのですが、今回はちょっと斜めからのアプローチとして、「リスク分析の人の頭のなかで仮説検定はこんな感じに見えている」というところを書いていきたいと思います。 ここで、ひ

どもです。林岳彦です。道に倒れて誰かの名を呼び続けたことはありません。 さて。 自分の頭の中でそろそろ「統計的因果推論に関するエトセトラ」が繋がってきた感がある*1ので、一度棚卸のために（クオリティは未だ低いものになるかもしれませんが）エトセトラのひと通りについて書いてみたいと思いました。 だいたい目次は以下の通りになる予定です： 統計的因果推論ノート：「正しいセカイの切り取り方」（予定目次） 統計的因果推論ノート1　そもそも"因果"って？：Hillの基準、ヒューム、反事実 統計的因果推論ノート1補遺1　よくある確率概念の分類：主観的、客観的、あるいは間主観的な 統計的因果推論ノート1補遺2　"可能性"の集合的理解：ケインズからコルモゴロフ、あるいは可能世界から確率へ 統計的因果推論ノート1補遺2の補遺1　"交換可能性"を想定するということ：可能世界から見るロールズと公共政策 統計的因果推

どもです。林岳彦です。息子の3DSにバーチャルコンソールの「ソロモンの鍵」を密かに入れました（まだ３面）。 さて。 前回の記事： 因果関係がないのに相関関係があらわれる４つのケースをまとめてみたよ（質問テンプレート付き） - Take a Risk：林岳彦の研究メモ につきましては沢山ブクマ等をいただき大変ありがとうございました*1。大変感謝しております。 さて。上記記事について、ublftboさんから「相関関係の定義が書かれていないのでは」（相関と因果 - Interdisciplinary）とのご指摘をいただいたきました。 ご指摘は確かにごもっともですので、今回は「相関」概念についてと、そのついでに近年に開発された"21世紀の相関（MIC）"の話について私なりに書いてみたいと思います。 （以下、ややマニア向けの話になるかもしれません。あと前回ほどではないですが、それなりに長いです。）

どもっす。林岳彦です。ファミコンソフトの中で一番好きなのは『ソロモンの鍵』です*1。 さて。 今回は、因果関係と相関関係について書いていきたいと思います。「因果関係と相関関係は違う」というのはみなさまご存知かと思われますが、そこをまともに論じていくとけっこう入り組んだ議論となります。 「そもそも因果とは」とか「因果は不可知なのか」のような点について論じるとヒュームから分析哲学（様相論理）へと語る流れ（ここのスライド前半参照）になりますし、統計学的に因果をフォーマルに扱おうとするとRubinの潜在反応モデルやPearlのdo演算子やバックドア基準（ここのスライド後半参照）の説明が必要になってきます。 その辺りのガッツリした説明も徐々に書いていきたいとは考えておりますが（予告）、まあ、その辺りをいちどきに説明しようというのは正直なかなか大変です。 なので今回は、あまり細かくて遭難しそうな話には

日常系の才能 オフラインラブを見終わった。いい番組は見終わったあとも心に残り、自分の人生に干渉してくる。 私が恋愛リアリティ番組に出たらどうなるんだろうとふと思った。客観的に考えて、私が誰かに相手にされる気がしない。第一印象で話しかけたいと思われるような容姿ではな…

日常系の才能 オフラインラブを見終わった。いい番組は見終わったあとも心に残り、自分の人生に干渉してくる。 私が恋愛リアリティ番組に出たらどうなるんだろうとふと思った。客観的に考えて、私が誰かに相手にされる気がしない。第一印象で話しかけたいと思われるような容姿ではな…

名取宏（なとろむ） @NATROM 「あやしい健康情報やニセ科学にダマされない方法」を謳った本で、「タバコが肺がんの原因であるとは断言できない」と書かれているらしい。あほか。介入試験しろってか？ http://t.co/bMzePVR6 2012-03-07 12:29:33 黒猫個人事務所 @HAJIMEmike いや、正しいでしょ。がんの原因が解明されない限り、あくまでも結果からの推測にすぎないから。 RT @NATROM: 「あやしい健康情報やニセ科学にダマされない方法」を謳った本で、「タバコが肺がんの原因であるとは断言できない」と書かれているらhttp://t.co/MVMGDDXI 2012-03-07 12:40:47