Дубликаты excel

[MrKeLevra]

Здравствуйте. Имеется массив 1 столбца с 1-2к слов. Дубликаты 1 к 1 удалить не сложно, просто нажав "удалить дубликаты". Но вот есть задача посложнее. Количество слов в документе - 10к. Остаются к примеру такие вот огрызки:

машина
машины
машиной
квартира
квартиры
квартирой

и тд...

Хочется как-то или сразу удалить все дубликаты, чтобы осталось только 1 слово, или как-то отфильтровать. К примеру, если в слове подряд идут 3 одинаковые буквы, одно из этих слов удаляется.
Заранее спасибо!

[EducatedFool]

чтобы осталось только 1 слово

морфологический анализ - это очень сложно
если требуется сделать это один раз - гораздо проще вручную

если в слове подряд идут 3 одинаковые буквы, одно из этих слов удаляется

плохая идея - будет много ошибок

[RAN.]

найти машин*
заменить все на машина
и т.д.
удалить дубликаты
при необходимости повторить

[IgorGO]

если совершенно не важно что будет на выходе, то можно и по 3-м одинаковым...

легко решить что делать с машинами

а с этой парой будет сложнее:
адреналин
адрес
тут даже 4 буквы совпадают, откройте любой словарь и взгляните, что Ваш ждет

[Gekan]

Как вариант, можно скопировать в файл словарь русского языка, порядка 100 000 слов будет достаточно. Дальше просто искать ваши слова в словаре, все огрызки тогда пойдут в корзину.

[MrKeLevra]

Всем спасибо за участие)

Сообщение от Gekan

Как вариант, можно скопировать в файл словарь русского языка, порядка 100 000 слов будет достаточно. Дальше просто искать ваши слова в словаре, все огрызки тогда пойдут в корзину.

какой объём работы необходимо выполнить и сколько времени у excel займёт прогнать 3000 слов по словарю, скажем, как вы и предлагаете, 100к слов?

[GAS1979]

Как я понимаю, обычной функцией ВПР() можно прогнать с точным совпадением. Потом удалить ошибки.

[Gekan]

Сообщение от MrKeLevra

какой объём работы необходимо выполнить и сколько времени у excel займёт прогнать 3000 слов по словарю, скажем, как вы и предлагаете, 100к слов?

Время зависит от машины.
А ещё больше - от того, как будет реализовано.
Я не специалист, но кажется есть там инструменты типа Dictionary, возможно придётся применить алгоритмы быстрого поиска и скорее всего они уже разработаны, надо просто их найти .

[Hugo121]

Заполнить словарь на 100к ключей - секунд 5.
Проверить по словарю 3к слов и вывести результат - секунда, может 2.
Итого на всё 10 секунд, скорее всего меньше.
Если конечно использовать dictionary и массивы.