出版社内容情報
「壊れたフラクタル」？――これほど複雑・多様かつ変化する人間のことばにあって，どんな時代の，どんな言語の，どんなジャンルでも成り立つという「統計的言語普遍」．現代の計算機言語学が提示する不思議を検証し，その意味を考えることから，人間の記号使用の深奥に迫ってゆく．
内容説明
これほど複雑・多様かつ変化する人間のことばにあって、どんな時代の、どんな言語の、どんなジャンルでも成り立つという「統計的言語普遍」。その不思議を検証し、その意味を考えることから、人間の記号使用の深奥に迫ってゆく。
目次
第１部 導入
第２部 要素の分布の特性：開放性・稀少性
第３部 系列の特性：塊現象・長期記憶
第４部 統計的言語普遍から言語の部分構造へ
第５部 統計的言語普遍と言語の数理モデル
第６部 思索的考察
結語
著者等紹介
田中久美子［タナカクミコ］
東京大学先端科学技術研究センター教授。東京大学大学院工学系研究科情報工学専攻博士課程修了、博士（工学）。工業技術院電子技術総合研究所、東京大学大学院情報学環講師、東京大学大学院情報理工学系研究科准教授、九州大学システム情報科学研究院教授を経て、２０１６年より現職。自然言語や記号系に普遍に内在する数理構造に興味を持つ。著書に『記号と再帰』（東京大学出版会、第３２回サントリー学芸賞、第１９回大川出版賞受賞）など（本データはこの書籍が刊行された当時に掲載されていたものです）
※書籍に掲載されている著者及び編者、訳者、監修者、イラストレーターなどの紹介情報です。
感想・レビュー
※以下の感想・レビューは、株式会社ブックウォーカーの提供する「読書メーター」によるものです。
センケイ (線形)
12
単語の頻度の Zipf's law などだけに留まらず、単語の出現頻度のバースト性や長相関など、大きいスケールで働く文書の複雑性を解析している。言ってみれば、フラクタル「にも」成り立つ法則だけでなく、もう少し丁寧な読み解きをしているのだ。斬新な取り組みゆえに試論的な感触もなくはないが、その分近年の技術である LLM についても (スケールフリーネットワークなどの既存技術と比較する形で) 実在の文書の法則が再現できるか確認しており、先進的なことをやっているといえるだろう。2023/11/29
人生ゴルディアス
8
言語の特性として割と見かける「ジップの法則」だが、真正面からその数理特性に取り組んだ本を初めて見た。（なので本屋で通りがかりにタイトル見て即買いしてしまった）深層学習に根を置く翻訳マシンの精度がかなり高くなっているので、むしろとっくに解析され終わっている話題だとばかり思っていたが、言語の統計的特性はある程度特定されているけれど、それがなにに由来するのかはよくわかっていない（数理モデルによる言語の統計的特性の再現が難しい）ようだ。途中挫折しかける部分がありつつ、ものすごく面白かった。2021/08/06
やす
5
言語を言語たらしめる性質とは何かを、ランダム列などとの数学的な比較から探っている。パラメータによって文章と単語ランダム列に差が出たり出なかったりして、文章の特性に迫っていく流れが気持ちいい。 知的好奇心を強く刺激された素晴らしい一冊。2022/06/28
こたろう
4
言語ではなく記号としてことばを統計処理した本。物理法則の言語への応用を試みる本<だと思ったら違った>。序盤から数章にわたってZipf則と白鯨（英語）のつまらない分析結果が続く。後半は、言語学側からのアプローチだと思って期待して読み進めていたのだが、言語を無機質な記号としてとらえたアプローチしか出てこず、ガッカリした。また2021年に出版する本なのに、BERTなどには言及されていない。アノTomaselloの仕事をThomasとほぼ全ての箇所で誤記している。NLPとして目立った成果が報告されていないと思った2021/07/28
kinaba
2
面白かった。トークン列に関する統計量が、どこまでランダムな生成源からでもでてくるか、どこからが「自然言語」を特徴づけている可能性があるか。昨今のLLMは(意味内容はともかく言語使用という面では)100%完全に自然言語を再現したと思うけれど、こういう評価の面ではどうなっているのだろうか。ランダム列から始めてなんらかの意味での学習を無限に収束するまで繰り返したら所望の統計量が出る、それが言語みたいな話になったりしないだろうか2023/05/21
