Архив рубрики ~Лента новостей~

NLP-анализ на примерах популярных фэнтези

NLP-анализ на примерах популярных фэнтези

⋮ Дисклеймер:
Беспристрастность. Анализ не претендует на безошибочную точность и не рекламирует труд писателей. Перевод романа «Игра престолов» книги_1 из цикла «Песнь льда и огня» (далее, «ПЛИО») с английского Ю. Соколов. Скрипты для NLP-анализа написаны мной, в основном пользовался ими для анализа и поддержания качества собственных материалов, а также распарсивал лонгриды для сравнения и оценки авторитетности персон.

Видел некоторые баталии комментариев на профильных ресурсах: частое сравнение двух высокооценённых циклов в жанре фэнтези/средневековье: «ПЛИО» VS «Полари».

Провёл анализ дебютных книг из вышеупомянутых циклов:
Игра престолов (далее «ИП», англоязычное фэнтези, книга_1 из цикла «ПЛИО»)
&
Стрела, монета, искра (далее «СМИ», русскоязычное фэнтези, книга_1 из цикла «Полари»).

Экспертиза

Год написания и возраст авторов: «ИП»:: написан в 1996г. (48 лет писателю); «СМИ»:: написан в 2016г. (29 лет писателю).

Премии: «ИП»:: 5 «СМИ»:: 2.

Гендерная гистограмма распределения оценок по 10-и балльной шкале. Мнение русскоязычной аудитории на Фантлабе. "ИП" — шедевр; "СМИ" — почти шедевр, не хватило чего-то в прозе для мужчин.
Гендерная гистограмма распределения оценок по 10-и балльной шкале. Мнение русскоязычной аудитории на Фантлабе. «ИП» — шедевр; «СМИ» — почти шедевр, не хватило чего-то в прозе для мужчин.

параметр

«ИП»

«СМИ»

прим.

кол-во предложений

12_989

33_171

кол-во слов

124_277

277_807

ср. длина предложений

9.5 слов

8.4 слов

доля эмоционального тона

3.1%

10.2%

[1]

кол-во уникальных лемм

19%/на 50К слов

33%/на 50К слов

[2]

доля диалогов

60.7%

47%

[3]

часто употребляемое ругательство

«седьмое пекло»

«тьма(сожри)»

самое длинное слово

«противоестественное/незаконнорожденного» (19)

«облагодетельствовать» (20)

имена ГГ, входящие в ТОП-10 слов (часто встречающиеся)

Джон; Нед; Бран; Тирион

Эрвин; Мира; Хармон

[1] Доля эмоционального тона — процент предложений с восклицательными и вопросительно восклицательными знаками, но не чисто вопросительными, например, «!/!!!/?!!…» У автора «СМИ» Суржикова ДЭТ поражающе высокая. Для сравнения: в романе Л. Толстого «Война и мир» ДЭТ ~5.1%

[2] Кол-во уникальных лемм — активный словарный запас автора (богатая речь), расчёт сделан после приведения всех слов к базовой форме. У автора «СМИ» очень богатая речь. Для сравнения: у 100 летнего романа Г. Хаггарда «Дочь Монтесумы» КУЛ ~20.3%/50К слов, а современный роман А. Пехова и его подруг «Летос» — КУЛ ~18.9%/50К слов.

[3] Доля диалогов — у обоих авторов очень высокая (выше средних), у Мартина, автора «ИП» — рекордная. Для сравнения: в романе М. и С. Дяченко «Vita Nostra» ДД ~43%.

ТОП_300_слов

Вычищены местоимения, предлоги и некоторые междометия.

Облако слов. 300 самых часто встречающихся слов в "ИП".
Облако слов. 300 самых часто встречающихся слов в «ИП».
Облако слов. 300 самых часто встречающихся слов в "СМИ".
Облако слов. 300 самых часто встречающихся слов в «СМИ».

💎 Опробовать поисковую систему, разработанную автором статьи.

Только зарегистрированные пользователи могут участвовать в опросе. Войдите, пожалуйста.Пользователи Хабра, читали/слушали ли вы Полари и/или ПЛИО?50%Да, Полари1100%Да, ПЛИО20%Нет0 Проголосовали 2 пользователя. Воздержался 1 пользователь.

Источник: habr.com

Оцените материал:

Читайте также
Архив рубрики ~Обо всем~ Я использую камеры Blink дома, и этот комплект из 5 камер со скидкой 65% просто невозможно игнорировать. Архив рубрики ~Обо всем~ Подсказки, ответы и помощь по Wordle за 13 июня, #1820 Архив рубрики ~Обо всем~ Расширенные контекстные окна не решают проблему RAG — поэтому я создал систему, которая её решает. Архив рубрики ~Обо всем~ Теперь Gemini может настраивать параметры изображения на Google TV. Архив рубрики ~Обо всем~ Эта простая регулировка антенны роутера улучшила скорость моего интернета больше, чем я ожидал. Архив рубрики ~Обо всем~ Первая роботизированная газонокосилка от Roborock уже здесь! Архив рубрики ~Обо всем~ Анализ PDF-файлов для RAG локально с помощью Docling: расширенные таблицы, без загрузки в облако. Архив рубрики ~Обо всем~ Утро после: стремление Apple сделать искусственный интеллект полезным для своих пользователей Архив рубрики ~Обо всем~ Я бы порекомендовал этот мини-телевизор TCL LED, который продается на 1000 долларов дешевле, чем премиальные модели Samsung и LG. Архив рубрики ~Обо всем~ Решение задачи о вероятности для последовательности 3Blue1Brown (без ИИ) Архив рубрики ~Обо всем~ Google подает в суд на китайских мошенников, использующих Gemini AI для совершения мошеннических действий. Архив рубрики ~Обо всем~ Rocket Report: Ракета «Нова» проходит испытательный цикл; IPO SpaceX состоится в пятницу. Архив рубрики ~Обо всем~ Я позволяю Siri видеть мою жизнь на Vision Pro, и это предзнаменование грядущих событий. Архив рубрики ~Обо всем~ Новая электронная книга Boox Go 6 поддерживает использование стилуса для ведения заметок. Архив рубрики ~Обо всем~ Я использую камеры Blink дома, и этот комплект из 5 камер со скидкой 65% просто невозможно игнорировать. Архив рубрики ~Обо всем~ Подсказки, ответы и помощь по Wordle за 13 июня, #1820 Архив рубрики ~Обо всем~ Расширенные контекстные окна не решают проблему RAG — поэтому я создал систему, которая её решает. Архив рубрики ~Обо всем~ Теперь Gemini может настраивать параметры изображения на Google TV. Архив рубрики ~Обо всем~ Эта простая регулировка антенны роутера улучшила скорость моего интернета больше, чем я ожидал. Архив рубрики ~Обо всем~ Первая роботизированная газонокосилка от Roborock уже здесь! Архив рубрики ~Обо всем~ Анализ PDF-файлов для RAG локально с помощью Docling: расширенные таблицы, без загрузки в облако. Архив рубрики ~Обо всем~ Утро после: стремление Apple сделать искусственный интеллект полезным для своих пользователей Архив рубрики ~Обо всем~ Я бы порекомендовал этот мини-телевизор TCL LED, который продается на 1000 долларов дешевле, чем премиальные модели Samsung и LG. Архив рубрики ~Обо всем~ Решение задачи о вероятности для последовательности 3Blue1Brown (без ИИ) Архив рубрики ~Обо всем~ Google подает в суд на китайских мошенников, использующих Gemini AI для совершения мошеннических действий. Архив рубрики ~Обо всем~ Rocket Report: Ракета «Нова» проходит испытательный цикл; IPO SpaceX состоится в пятницу. Архив рубрики ~Обо всем~ Я позволяю Siri видеть мою жизнь на Vision Pro, и это предзнаменование грядущих событий. Архив рубрики ~Обо всем~ Новая электронная книга Boox Go 6 поддерживает использование стилуса для ведения заметок.