Калькулятор лексичного різноманіття
Вимірюйте багатство словникового запасу тексту за допомогою коефіцієнта тип-токен та пов'язаних індексів.
Калькулятор лексичного різноманіття
Вставте будь-який текст, і цей інструмент виміряє багатство його словникового запасу — показник, який письменники, редактори, викладачі та дослідники використовують для виявлення повторюваних виразів або порівняння багатства двох уривків. Інструмент підраховує загальну кількість слів та кількість унікальних слів, а потім надає коефіцієнт тип-токен (TTR), його кореневий варіант (індекс Гіро) та логарифмічний варіант (C Хердана), а також ковзне середнє TTR, яке вимірює різноманіття у ковзних вікнах тексту, щоб довгі документи не були несправедливо оштрафовані лише за велику кількість слів.
Параметри визначають, що вважається окремовим словом. Ігнорування стоп-слів видаляє звичайні функціональні слова, як-от «the» або «and», перед порівнянням, тому коефіцієнт відображає слова змісту, а не граматику. Ігнорування регістру та діакритики означає, що «Apple» та «apple» — або «café» та «cafe» — розглядаються як одне слово. Обрізання слів до базової форми застосовує спрощену евристику відділення суфіксів, настроєну для англійської мови, так що «running» та «runs» сходяться до «run», а не до повної лематизації. Мінімальна довжина слова відфільтровує короткий наповнювач, вікно ковзного середнього управляє кількістю слів, які охоплює кожен зразок різноманіття, і ви можете перерахувати стільки найчастіше повторюваних слів, скільки захочете. Виберіть резюме простою мовою або таблицю, розділену табуляцією, залежно від того, читаєте ви цифри або вставляєте їх у електронну таблицю.
Коефіцієнт тип-токен сам по собі зменшується по мірі того, як текст довшає, просто тому, що слова починають повторюватися — саме тому існують кореневий та логарифмічний варіанти та оцінка ковзного середнього, кожна з яких по-різному коригує довжину. Порівняння всіх чотирьох показників одночасно дає більш повну картину, ніж будь-яке окреме число. Інструмент однаково обробляє кінці рядків Windows (CRLF) та Unix (LF), а жива підрахунок під результатом показує кількість слів та кількість унікальних слів поряд зі звичайним TTR по мірі введення.
Усе працює у вашому браузері. Ваш текст ніколи не завантажується на сервер, тому безпечно вставляти чернетки, рукописи або студентські твори. Скопіюйте результат, завантажте його як файл .txt або відправте результат назад на вхід, щоб продовжити уточнення аналізу.