べんふぉーどのほうそく
ベンフォードの法則
別名・関連する言い方:Benford's law、first-digit law
いろいろな出どころの数を集めると、先頭の数字は1がいちばん多く(約30%)、2、3と大きくなるにつれて少なくなり、9は約5%になる、という傾向です。当てはまらないデータも多くあります。
なぜ「数学・論理」なのか
先頭の数字が d になる割合を log10(1+1/d) とする法則で、1なら約30.1%、9なら約4.6%です。全部の数に同じ数を掛けても(単位を変えても)先頭の数字の割合が変わらない分布は、この割合のものに限られることが、数学の定理として示されています (Hill 1995 が紹介する定理1)。一方で、実際のデータがその条件に合うとは限りません。Hill (1995) は、同じ地域の電話番号のように当てはまらない表も多いと書き、ベンフォード (1938) 自身も、4けた以上の数で、互いに関係の無い出どころの数のほうがよく合うとしていました。
「数学・論理」を付ける条件:定理・近似・統計の性質として導けるもの。ラベルの一覧と定義
原典の一文と、広まった形
原典
A compilation of some 20,000 first digits taken from widely divergent sources shows that there is a logarithmic distribution of first digits when the numbers are composed of four or more digits.
訳:大きく異なる出どころから集めた約2万の先頭の数字をまとめると、数が4けた以上でできているとき、先頭の数字は対数の分布になる。
Benford (1938) The Law of Anomalous Numbers の要旨 (Abstract), p.551。論文の全文 (JSTOR の PDF の写し) のページの画像で照合。
広まった形
ベンフォードの法則に合わない数字は、ごまかされている。会計や選挙の数字をこれで調べれば、不正が分かる。
図で見る
- 棒:式 log10(1+1/d) の割合(1は30.1%、9は4.6%)
- 点:ベンフォードの表Iの20の表の平均(20,229個の数、1は30.6%、9は4.7%)
- 破線:1から9が同じ割合なら、どれも約11.1%
棒は式 log10(1+1/d) の値、丸い点は Benford (1938) p.553 の表 I の「Average」の行(20 の表の平均)、破線は 1 から 9 が同じ割合(約 11.1%)のときの高さです。表ごとの割合はばらつき、たとえば原子量の表は 1 で始まる数が 47.2% でした。点はベンフォードが公表した値そのままで、丸めの扱いを直した値ではありません(丸めについては、Hill (1995) が紹介する Diaconis & Freedman (1979) の指摘があります)。
図はこの事典で描いたものです。
対数表の傷み方から
天文学者のサイモン・ニューカムは1881年の短い論文で、対数表をよく使う人なら、初めのページが終わりのページより早く傷むのに気づくはずだと書きました。先頭の数字は1がいちばん多く、9に向かって少なくなるとし、数の対数の小数部分はどの値も同じくらい出る、という法則を述べて、先頭の数字の割合を1は0.3010、9は0.0458と表にしました。
ベンフォードが数えた20の表
1938年、ゼネラル・エレクトリックの研究所の物理学者フランク・ベンフォードは、川の面積、人口、物理の定数、新聞の記事、比熱、野球のアメリカン・リーグの記録、番地など20の表から20,229個の数を集め、先頭の数字を数えました。20の表の平均は、1が30.6%、9が4.7%で、式 log10(1+1/d) の30.1%・4.6%に近い値でした。Hill (1995) は、ベンフォードが丸めの誤差を扱って合い方をよく見せたという説得力のある証拠を Diaconis & Freedman (1979) が出したと紹介しつつ、手を加えていない値でもよく合うと書いています。ベンフォードは、新聞の記事の数のように互いに関係の無い数のほうが、分子量・比熱・物理の定数・原子量のような、まとまった性質の表よりよく合うとし、この傾向を「変則的な数の法則」と名付けました。また、数の集まりが一定の割合で増える並び(等比数列)になりやすいことを、この傾向の元と考えました。
なぜこの割合になるのか
ニューカムの言い方のとおり、数の対数の小数部分がどの値も同じくらい出るとすると、先頭が1になる割合は log10 2(約30.1%)になります。Hill (1995) は、全部の数に同じ数を掛けても(たとえば単位をメートル法からヤード・ポンド法に変えても)先頭の数字の割合が変わらない分布は、この割合のものに限られるという定理を紹介しました。そのうえで、いろいろな分布を偏りなく選び、それぞれから取り出した数を合わせると、先頭の数字がこの割合に近づくことを証明しました。Hill は、ベンフォードの個々の表は合わないことも多く、合わせた全体がよく合った、という指摘も引いています。
不正の判定に使えるか
この法則は、選挙の票の数を調べて不正を見分ける方法としても使われてきました。Deckert ほか (2011) は、不正の模擬と実際の選挙のデータで調べ、法則への合い方と外れ方は不正の有無と決まった関係が無く、当たる割合は硬貨を投げるのと変わらないとして、判定の道具としては「よくても問題がある」と結論しました。同じ号で Mebane (2011) は、この論文の進め方に反論しつつ、2けた目の数字の平均が期待される値からずれることは不正の証拠ではない、という点には同意し、使えるかはまだ決まっていない問いだと書いています。法則に合わないことは、それだけでは不正の証拠になりません。ここで取り上げた Deckert ほか と Mebane の研究は選挙の票の数を調べたもので、会計のデータは扱っていません。
身近な例
1から9までの数字が先頭に来る割合が同じなら、どれも約11.1%になるはずです。ところが、ベンフォードが新聞の一面の記事に出てくる数100個を数えると、1で始まる数が30.0%、9で始まる数が5.0%でした。毎年10%ずつ増える量を考えると、100から200になるまでは約7.3年かかりますが、900から1,000になるまでは約1.1年です。一定の割合で増える量は、先頭が1の間が長くなります。一方、同じ地域の電話番号のように、数の範囲が決まっているものには当てはまりません。
よくある誤解
- 誤解
- ベンフォードの法則に合わない数字は、ごまかされた証拠になる。
- 実際は
- 合わないことは、それだけでは不正の証拠になりません。選挙の票の数について Deckert ほか (2011) は、不正の模擬と、不正があったと分かっている選挙・無かったと見られる選挙のデータで調べ、法則への合い方と外れ方は不正の有無と決まった関係が無く、判定の道具としては「よくても問題がある」と結論しました。同じ号のコメントで Mebane (2011) は、使えるかはまだ決まっていない問いだとしながら、2けた目の数字の平均が期待される値からずれることは不正の証拠ではない、という点には同意しています。
- 誤解
- どんな数を集めても、先頭の数字はこの割合になる。
- 実際は
- ベンフォードの表でも、原子量の数は1で始まるものが47.2%で、20の表の中で法則から最も離れていました。Hill (1995) は、同じ地域の電話番号や、整数の平方根の表のように、当てはまらない表も多いと書いています。ベンフォード自身、関係の無い出どころの数のほうがよく合うとし、4けた以上の数を前提にしていました。
- 誤解
- この法則は、ベンフォードが最初に見つけた。
- 実際は
- 天文学者のサイモン・ニューカムが1881年に、対数表の初めのページが終わりのページより早く傷むことから、同じ割合を書いていました。Hill (1995) によると、ニューカムの論文が見過ごされていたため、57年後に2万を超える数で確かめ直した物理学者ベンフォードの名で、ベンフォードの法則とも呼ばれるようになりました。
出典
- 原典Benford, F.(1938)「The Law of Anomalous Numbers」Proceedings of the American Philosophical Society, 78(4), pp. 551–572。https://
www.jstor.org/ stable/ 984802 - 先に書かれた論文Newcomb, S.(1881)「Note on the Frequency of Use of the Different Digits in Natural Numbers」American Journal of Mathematics, 4(1), pp. 39–40。https://
archive.org/ details/ jstor-2369148 - 数学の説明Hill, T. P.(1995)「A Statistical Derivation of the Significant-Digit Law」Statistical Science, 10(4), pp. 354–363。https://
doi.org/10.1214/ss/ 1177009869 - 不正の判定への批判Deckert, J., Myagkov, M., & Ordeshook, P. C.(2011)「Benford's Law and the Detection of Election Fraud」Political Analysis, 19(3), pp. 245–268。https://
doi.org/10.1093/ pan/ mpr014 - 批判へのコメントMebane, W. R., Jr.(2011)「Comment on "Benford's Law and the Detection of Election Fraud"」Political Analysis, 19(3), pp. 269–272。https://
doi.org/10.1093/ pan/ mpr024