Частотность
Частотность — термин лексикостатистики, предназначенный для определения наиболее употребительных слов. Расчёт осуществляется по формуле:
где Freqx — частотность слова «x», Qx — количество словоупотреблений слова «x», Qall — общее количество словоупотреблений. В большинстве случаев частотность выражается в процентах. В словарях частотность слов может отражаться пометками — употребительное, малоупотребительное и т. д.
Аналогичным образом определяется частотность для букв. Бо́льшая частотность согласных на данном отрезке текста (например, в стихотворениях) получила название аллитерации. Высокие показатели частотности гласных называются ассонансом. Частотный анализ используется в криптографии для выявления наиболее частотных букв того или иного языка.
Частотность слов и букв являлась важнейшим инструментов криптоанализа в эпоху до повсеместного распространения блочных шифров.
Не следует путать термины частотность и частота.
Частотность букв русского языка
Статистика частотности букв русского языка (на материале НКРЯ):[1]
| буква | ранг | употреблений | частотность | |
|---|---|---|---|---|
| а | 3 | 40487008 | 8,01% | |
| б | 21 | 8051767 | 1,59% | |
| в | 9 | 22930719 | 4,54% | |
| г | 19 | 8564640 | 1,70% | |
| д | 13 | 15052118 | 2,98% | |
| е | 2 | 42691213 | 8,45% | |
| ё | 33 | 184928 | 0,04% | |
| ж | 25 | 4746916 | 0,94% | |
| з | 20 | 8329904 | 1,65% | |
| и | 4 | 37153142 | 7,35% | |
| й | 23 | 6106262 | 1,21% | |
| к | 11 | 17653469 | 3,49% | |
| л | 10 | 22230174 | 4,40% | |
| м | 12 | 16203060 | 3,21% | |
| н | 5 | 33838881 | 6,70% | |
| о | 1 | 55414481 | 10,97% | |
| п | 14 | 14201572 | 2,81% | |
| р | 8 | 23916825 | 4,73% | |
| с | 7 | 27627040 | 5,47% | |
| т | 6 | 31620970 | 6,26% | |
| у | 15 | 13245712 | 2,62% | |
| ф | 31 | 1335747 | 0,26% | |
| х | 24 | 4904176 | 0,97% | |
| ц | 28 | 2438807 | 0,48% | |
| ч | 22 | 7300193 | 1,44% | |
| ш | 26 | 3678738 | 0,73% | |
| щ | 29 | 1822476 | 0,36% | |
| ъ | 32 | 185452 | 0,04% | |
| ы | 17 | 9595941 | 1,90% | |
| ь | 18 | 8784613 | 1,74% | |
| э | 30 | 1610107 | 0,32% | |
| ю | 27 | 3220715 | 0,64% | |
| я | 16 | 10139085 | 2,01% | |
См. также
- Частотный словарь
- Анализ текста
- Математическая лингвистика
- Статистика запросов
- Частотность букв немецкого языка
- Частотность букв таджикского языка
- Списки частотности в Викисловаре
Примечания
- ↑ О. Н. Ляшевская, С. А. Шаров. Новый частотный словарь русской лексики (Дата обращения: 23 апреля 2017)
Ссылки
- Самые частотные буквы в различных языках (англ.)
- Пиперски А. Частотность в языке. ПостНаука (24 декабря 2015).
- en:Most common words in English (англ.)
- Letter frequency-simia.net (англ.)