Playboy
Я распарсил каждую статью каждого выпуска журнала Playboy с 1953 по 2020 годы.
Захотелось прокачать навыки NLP и проверить гипотезу: упрощался ли стиль статей в журнале? Особенно после 1995 года, когда начали распространятся цифровые фотоаппараты и в журнале стало меньше статей и больше прямолинейного контента.
На первом шаге с помощью python и nltk я почистил статьи от стоп-слов и пунктуации, собрал корпус из отдельных текстов и разметил части речи (part-of-speech) для каждого слова.
Потом для имён собственных выделил топ-10 наиболее повторяемых событий, людей, явлений для каждого года.
Для быстрой визуализации немного почистил результаты вручную.
В таблице много знакомых имён бросились в глаза и я начал выделять их.
Но кое-что я оставил без пометок, что бы вам тоже было интересно полазить. Это похоже на игру Бинго или Лото)
Что заметили в приложенной таблице и что ещё хотелось бы посмотреть в корпусе текстов Playboy?
Post #143
743

- 👍 11