Испанские математики проверили на прочность закон Ципфа, согласно которому при попытке упорядочить все слова языка или текст по убыванию частоты их использования частота n-го слова в таком списке окажется приблизительно обратно пропорциональной его порядковому номеру n. О результатах исследования рассказывается в свежем выпуске журнала PLOS ONE.
Для того, чтобы определить правильность закона Ципфа, исследователи решили использовать его применительно к проекту «Гутенберг» — инициативе по созданию и распространению электронной универсальной библиотеки, которая включает 31075 книг на английском языке. Прежние попытки применить закон Ципфа ограничивались десятками текстов, а теперь исследователи работали с настоящим массивом данных.
Ученые поставили перед собой задачу определить, вписываются ли тексты в закономерность, согласно которой второе по используемости слово встречается примерно в два раза реже, чем первое, третье — в три раза реже, чем первое, и так далее. Таким образом, ими была избрана простейшая формулировка закона Ципфа.
Согласно итогам исследования, при условии, что опущены наиболее редкие и архаичные формы слов, порядка 55 процентов текстов вписываются в закон Ципфа. Если учитывать эти слова, то соответствие закономерности снижается до 40 процентов.
Лингвист Джордж Кингсли Ципф исследовал частотность слов: одних в тексте попадается больше, других меньше, и по этому принципу все слова разбиваются на группы. Ученый предложил дать этим группам порядковые номера (ранги): самые частотные слова получают номер 1, с частотностью пониже — 2, еще на уровень ниже — 3, и так далее.
После этого вычисляется вероятность встретить слово Икс в тексте: количество слов Икс в тексте делится на число всех слов. Ципф обнаружил, что если вероятность для слова Икс помножить на порядковый номер ранга, в котором оно оказалось, то каждый раз будет получаться приблизительно одна и та же величина. Так, для английского языка эта константа равна примерно 0,1, а для русского — 0,06-0,07.
Strategiya.az
Strategiya.az
НОВАЯ ЭРА В ИСТОРИИ АЗЕРБАЙДЖАНА
Образец высокой чести достоинства
Так было, так есть и так будет: из года в год гордый народ выполняет Заветы Общенационального лидера Гейдара Алиева
К 70-летию Евгения Кушнарева
31 летняя кровавая боль Независимости Азербайджана, который Излечился от 44 дневной Отечественной войной
Парламентские выборы в Казахстане: новый шаг вперед по пути модернизации и прогресса
Гейдар Алиев всегда будет жить в сердцах людей
Солидарность Азербайджанского Народа, Армии, Президента и Международного права
СТРАТЕГИЧЕСКИЙ ПОДХОД В ФОРСИРОВАНИИ БУДУЩЕГО ПОКОЛЕНИЙ - НЕЗАВИСИМОСТЬ АЗЕРБАЙДЖАНА ВЕЧНА И НЕОБРАТИМА
Эрнстам, Симоньянам, Добродеевым и Шейниным не удается испортить отношения России и Азербайджана
Пашинян пополз к Москве - на коленках
За сегодняшний день в Тертере упало свыше 2 тыс. снарядов - Хикмет Гаджиев
Эрдоган: Я надеюсь, что Азербайджан "освободит свои территории" в Карабахе
Симоньян наказали
«Кровавая рана» на карте мира: Карабах Азербайджан!..
Азербайджанский ученый - стал почетным номинантом «Ученый года»
Национальная идея – основа системы миропонимания нации, стимул для укрепления государственности
25 лет Конституции Республики Казахстан
Об улучшении эпидемиологической ситуации в Казахстане
Музыка - жизнь моя. Владимир Мигуля
«Черная Зависть» - главная помеха крепкой дружбы Украины и Азербайджана
Международные "правозащитники" - почему они молчат о нападении на азербайджанцев?
Казахстан: новые меры на новом этапе борьбы с эпидемией
О сообщениях относительно пневмонии в Казахстане
« Водная безопасность Азербайджана и политика «водного террора» Армении»
Академик Ягуб Махмудов призвал пересмотреть решение Национального Совета Азербайджана о передаче Иревана армянам
Главный инфекционист США ушел на 14-дневную самоизоляцию
Иран готов к обмену заключенными с США без предварительных условий
Более тысячи человек вылечились от коронавируса в Москве за сутки
Первый с начала апреля случай заражения COVID-19 выявлен в Ухане
Слова лидера: «Справедливость поддерживает национальную идею и дипломатию»
Сегодня 97-я годовщина со дня рождения общенационального лидера Азербайджана Гейдара Алиева
31 марта Днем геноцида азербайджанцев. История о геноциде азербайджанского народа
Богатейший человек мира дал 10 миллиардов долларов на «спасение Земли»
Директор больницы в Ухане умер от коронавируса
ЕС может ввести меры против соцсетей за отказ от цензуры
Дефицит бюджета США стал максимальным с 2011 года
Открылся Кюрдамирский филиал ОАО «Азерхалча» - ОБНОВЛЕНО
Гонконг предоставил материковому Китаю $143 млн на борьбу с коронавирусом
"Великая Армения" за счет чужих земель - на очереди Турция, Россия и Грузия
Страшные события человечества незабываемы историей и народом
Президент Ильхам Алиев: За эти годы Азербайджан стал космическим государством
Президент Ильхам Алиев вручил Поладу Бюльбюльоглу орден "Гейдар Алиев"
Президент Ильхам Алиев принял участие в конференции, посвященной итогам первого года реализации Госпрограммы социально-экономического развития регионов в 2019-2023 годах (ФОТО)
Президент Ильхам Алиев наградил Хейраддина Годжаева орденом «Шохрат»
Google закрыл свои офисы в Китае
Армянский солдат застрелился в оккупированном Карабахе в день ВС Армении
По поручению Президента Ильхама Алиева проведено совещание в связи с коронавирусом
Из зоны землетрясения в Турции эвакуировали десятки азербайджанцев
Азербайджанских студентов эвакуируют из зоны землетрясения в Турции
