Как узнать % схожести текста?

FFFFx029A · 03.03.2010, 05:23

Всем доброго времени суток..
Как узнать % схожести текста? Может у кого есть заготовочка или как лучше проверять такое?
Есть анекдоты, нужно отсеять одинаковые, но разница бывает в том что в одном есть "..." или вместо слова "ты", написано "тебе"...

ЗЫ: тексты все в MySQL базе, я так понял для сравнения прийдётся вытаскивать каждый или как лучше отсеять?)

gobliin · 03.03.2010, 20:08

Можно попробовать провести анализ с помощью phpmorphy + словарь синонимов. Но это не тривиальная задача.

Elektra · 03.03.2010, 20:40

Удобно проверять уникальность через Адвего плагиатус

gobliin · 05.03.2010, 05:02

Читай тут:

http://www.smotrite.ru/s28.shtml
http://www.codeisart.ru/part-1-shing...web-documents/

topmet · 05.03.2010, 10:00

еще есть прога dupefree, проверяет на дуаликаты, схожесть текста

03.03.2010, 05:23	#1
FFFFx029A Новичок Регистрация: 23.03.2008 Сообщений: 5 Вес репутации: 0	Как узнать % схожести текста? Всем доброго времени суток.. Как узнать % схожести текста? Может у кого есть заготовочка или как лучше проверять такое? Есть анекдоты, нужно отсеять одинаковые, но разница бывает в том что в одном есть "..." или вместо слова "ты", написано "тебе"... ЗЫ: тексты все в MySQL базе, я так понял для сравнения прийдётся вытаскивать каждый или как лучше отсеять?)

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Форматирование текста	Vell	Разработка и сопровождение сайтов	6	23.01.2010 15:28
проверка текста на количество текста, % ключевых слов оффлайн	balbeska	Общие вопросы оптимизации	1	15.12.2008 21:28
замена текста	Baks$	Вопросы от новичков	1	28.04.2008 20:04
Ссылка без текста	alliance56	Курилка	1	17.01.2008 02:40
Замена текста.	RomanG	Вопросы по работе системы	3	20.09.2007 20:13

03.03.2010, 20:08	#2
gobliin Специалист Регистрация: 07.05.2008 Адрес: Н-ск Сообщений: 254 Вес репутации: 210	Можно попробовать провести анализ с помощью phpmorphy + словарь синонимов. Но это не тривиальная задача.

03.03.2010, 20:40	#3
Elektra Специалист Регистрация: 03.06.2008 Сообщений: 241 Вес репутации: 201	Удобно проверять уникальность через Адвего плагиатус

05.03.2010, 05:02	#4
gobliin Специалист Регистрация: 07.05.2008 Адрес: Н-ск Сообщений: 254 Вес репутации: 210	Читай тут: http://www.smotrite.ru/s28.shtml http://www.codeisart.ru/part-1-shing...web-documents/

05.03.2010, 10:00	#5
topmet Новичок Регистрация: 28.11.2009 Сообщений: 10 Вес репутации: 0	еще есть прога dupefree, проверяет на дуаликаты, схожесть текста