Определение тематики текстов. Интересны ваши предложения.

[Йода]

Сообщение от Videoson

отсюда и мораль - программа распознавания текстов даже второго поколения - супергуд для переписывания текстов

Вы так это говорите- как будто я представитель Яндекса, который злопыхает на тему "я все равно пропалю ваши синонимизированные тексты"

А для поддержания дискуссии могу предложить строить шинглы не на самом тексте, а на тексте в котором слова приведены к нормальным формам.
Насчет стоп слов не думал- что это?
А про разрушение шинглов- для этого и предлагается строить параллельно несколько рядов с разным основанием- тогда чтото порушится, а чтото останется- это чтото оставшееся и будет основанием для утверждения о дублицированности.

Кстати- на МКАДе появился билборд сервиса Перепишем.ру. Типа- все прёт ?

[Videoson]

вопрос нормальных форм очень дискуссионен.
приводить ли деепричастие к глаголу?
а наречие, например, к исходному прилагательному, которое в свою очередь к глаголу, который в свою очередь к первоосновному существительному?

Сообщение от Йода

Кстати- на МКАДе появился билборд сервиса Перепишем.ру. Типа- все прёт ?

спасибо, что отметили
нравится?

ЗЫ не только на МКАДе, но и на всех основных трассах

[Йода]

Сообщение от Videoson

спасибо, что отметили
нравится?

Окупаеццо? Или вы из МосОблРекламы проросли и временно пустующие площади нахаляву достаюцца? В любом случае - завидую- я помницца не осилил по деньгам расставить щиты на мкаде..

О продаже системы не думали? Если думали- то каков порядок сумм? Я имею в виду не продажу бизнеса а продажу синонимизатора как продукта.

[Videoson]

Сообщение от Йода

О продаже системы не думали? Если думали- то каков порядок сумм? Я имею в виду не продажу бизнеса а продажу синонимизатора как продукта.

продукт стоит от 8 рублей за 1000 знаков текста - вся информация есть на сайте

[Йода]

Это стоит использование сервиса.
А я про движочег..
Ну судя по ответам- не собираетесь..

[Zloi Ded]

Сообщение от dentist15

Выделить наиболее частые ключи и сверить их с базой.
_istio.com/rus/text/analyz/

прикольненько

[Videoson]

Сообщение от Йода

Это стоит использование сервиса.
А я про движочег..
Ну судя по ответам- не собираетесь..

движочек разрабатывался три года и совсем не для этих целей
так что

[Маленькая сосна]

Ап!

Перед знакомыми встал вопрос. Есть некоторое количество художественных текстов разной степени грамотности. Точно известно, что какая-то часть построена по определенной сюжетной схеме. Вопрос: можно ли как-то их отобрать из общего массива?

Плюнуть на эту затею сразу и тупо читать или можно побарахтаться? А если последнее, то в какую сторону смотреть?

[Йода]

Сообщение от Маленькая сосна

известно, что какая-то часть построена по определенной сюжетной схеме. Вопрос: можно ли как-то их отобрать

Тяжко.. Если только "сюжетная схема" не распознается по какимто специфичным признакам, типа предложений с хитрой структурой и тд.
Сейчас возможно сделать следующее- для каждого предложения построить граф, т.е. его схему типа "подлежащее-сказуемое-причастие.." и привести слова к нормальной форме. Если структуры предложений статистически говорят о "сюжетной схеме" - то можно думать дальше..
Но яб не подписался с наскоку это сделать..

[Маленькая сосна]

Спасибо, что откликнулся.

Не поняла, как структура предложения связана с сюжетом. Тексты большие, это почти книги, то есть счет идет не на тысячи знаков, а на авторские листы. Сюжет - это те события, которые описаны в тексте, это даже не его структура (хотя...)... Схема "попаданцы" ака "наши - там". Проще говоря, идет рассказ про какого-то человека из нашей действительности, с ним что-то происходит, и он оказывается где-то. Есть тексты, где герой переносится в прошлое, есть - где в параллельный мир. Можно, наверное, исключить будущее. И вот он там начинает обустраиваться: вживается в общество, меняет под себя мир, оказывается великим магом/воином/королем/шпионом в тылу у немцев во время ВОВ. Вот. )) Я вчера подумала, что можно просто карту текста сделать, может, какие наиболее типичные слова отыщутся?.. Ну и это, да, может, как-то сюда же граф присобачить, потому что если эти типичные слова существуют, то и связи у них наверняка тоже какие-то есть?...

Или это совсем-совсем неправильно?