統計を理解するためのインサイダーのヒント

コンテンツ

• 使用する比較ポイントは統計ストーリーを変える可能性があります
• 統計的有意性を理解する

• 統計について人々がしばしば誤解することの1つは、すべての統計は他の何かと比較してのみ何かを意味するということです。
• 比較ポイントが異なると、まったく同じ統計をどのように認識するかが変わります。たとえば、グラスをフルグラスと比較すると半分空になり、空のグラスと比較するとハーフフルになります。
• ランダム化比較試験などの一部の実験では、研究者は優れた比較グループを作成できます。これを使用して、介入がどの程度うまく機能しているかを把握できます。

私は少なくとも年に一度は統計を教えようとしています。私は学部生として統計を絶対に嫌いでしたが、今は反対側にいるので、学生が主題を評価する（または少なくとも軽蔑しない）のを助けることは私に大きな喜びをもたらします。今期は授業をしていません。幸運なことに、この件に関する私の考えを聞くことができます。

毎学期、私は学生にコースから抜け出すことを望んでいることを尋ねます、そして彼らは必然的にそこにいる人々が統計で彼らをだまそうとしているというこの考えについて話し合います。人々が悪意を持って隅々まで騙していること、そしてどういうわけかこのクラスは彼らが騙しをナビゲートするのを助けるはずだということ。私はこれを言います。確かに、統計が苦手な人もいます。しかし、ほとんどの場合、これは悪意によるものではないと思います。それは一つの重要なことの理解の欠如によって引き起こされていると思います。そして、他の誰かのトリックのように感じることのほとんどは、多くの場合、受信者（つまりあなた）の理解不足が原因です。

この1つのスキルは、ジャーナル記事のような基本的な読み物から人気のある新聞記事の見出しに至るまで、すべての科学文献のより良い消費者になると私が思うものです。ボーナスは、このスキルはまったく数学を必要としないということです。少なくとも、電卓で行うような数学ではありません。代わりに、ロジックが必要です。

秘密はこれです：すべての統計は他のものと比較してのみ何かを意味します。比較ポイントを認識し、最終的には最良の比較ポイントを選択するスキルを身に付けることが、プロのように統計を理解する秘訣です。

使用する比較ポイントは統計ストーリーを変える可能性があります

ほとんどの場合、人々は暗黙の比較ポイントがあることに気付かずに統計を読み返します。レモネードのグラスについての古典的な質問について考えてみてください。グラスは半分空ですか、それとも半分いっぱいですか。いずれにせよ、あなたはレモネードの現在の状態（グラスの半分まで）を他のものと比較しています。これがあなたがしていることであることに気付かないかもしれませんが、あなたが使用する比較ポイントはあなたの答えを定義するものです。ガラスが半分いっぱいだと考えるなら、あなたの比較は空のガラスです。あなたが何かを半分空だと考えるなら、あなたの比較ポイントは完全なガラスです。これは、まったく同じ統計をどのように認識するかを変える比較ポイントです。

時間の経過とともに、他の人が異なる比較グループを使用していることに気付くでしょう。これらの違いから学びましょう。他の誰かの比較ポイントは必ずしも間違っているわけではありませんが、それは非常に異なる統計的な話をするでしょう。彼らはあなたに1つを引っ張っていますか？多分。しかし、彼らが比較ポイントに気付いていない可能性も非常に高いです。彼らは、理由を理解せずにガラスが半分いっぱいになっていると見ています。理由がわからないまま、半分空になっているように見えます。使用している比較ポイントについて話し合うことは、最終評価について議論するよりも生産的である可能性がはるかに高くなります。そしてもちろん、両方の比較ポイントが有効である可能性があるため、ガラスは半分が空で半分がいっぱいになる可能性があります。

統計的有意性を理解する

ここにあなたのためのもう一つのインサイダーのヒントがあります—ボーナスのヒント：科学者が何かを「統計的に有意」であると話すとき、彼らは数が他のものとは異なるという結論を出します。お金を節約したいという人々のモチベーションを高めようとしているとしましょう。そして私は、お金を節約するモチベーションを高めると思うこの簡単な振り返りの練習を開発します。私はその介入を提供することはできず、私のサンプルのモチベーションスコアは10点満点中7点であり、それは高いので、私の介入は適切であるに違いありません。 （まあ、私はそれを言うことを試みることができますが、それは悪い科学であり、通常、ピアレビューのおかげで公開されません）。

代わりに、私は良い比較をする必要があります。最良の比較は、私が介入した人と同じような人です。それらの人々の何人かはおそらくかなり高いモチベーションを持ち、何人かはかなり低いでしょう。彼らは、私の介入なしに世界がどのように見えるかについての良い推測を私に与えてくれます。次に、このグループを比較ポイントとして使用できます。私のグループが10点満点で7点を獲得し、この比較グループが10点満点で6点を獲得した場合でも、私の介入はおそらくモチベーションを高めると言えますが、どれだけ慎重に見積もることができます。

私が今あなたに説明したのは実験です—対照群（比較群）と治療群による研究です。ワクチンやCOVID治療をテストするために見たようなランダム化比較試験では、このアプローチが使用されています。これは、優れた比較グループを作成できるため、研究のゴールドスタンダードです。科学研究を読むときは、彼らの比較グループが何であったかを見てください。良かったですか？グループは、変更したい1つのことを除いて、可能な限り類似していましたか？科学者が比較を行っていることを理解することは、見出しや通訳を必要とせずに彼らの発見を理解し始めるのに役立ちます。

適切な比較グループを認識することは、必ずしもすぐにあなたに来るとは限りません。そして、多くの場合、複数の正しいグループが存在することになりますが、これは非常に苛立たしいことです。私が最初にこれをあなたに話すならば申し訳ありませんが、世界は複雑です。同じことが2つの異なることを意味する可能性があるという事実を受け入れる必要があります。使用する比較グループを正確に決定する方法を説明する秘密はまだありません。ただし、どちらを使用しているかを検討することから始めてください。次に、別の比較を真剣に検討します。ゆっくりと、2つを区別するためのスキルを開発する必要があります。どちらがあなたを幸せにしたり、あなたの主張をより良くするのを助けたりするのではなく、どちらがあなたに統計自体のより強い理解を残します。