Автоматическая обработка текста

Разработка одного из приложений по АОТ:
1) Распознавание языка текста / дешифровка текста / оценка естественности / схожести текстов на базе статистики (можно использовать статистические данные, которые есть в литературе или в сети Интернет в открытом доступе).
2) Тематическая классификация документа на основе векторной модели текста (с использованием или без машинного обучения)
3) Извлечение информации из текста на основе языка LSPL (подробное описание языка и подключения модуля распознавания конструкций по шаблону высылается по запросу)
4) Анализ тональности короткого текста на базе словаря оценочных слов
5) Составление реферата заданного текста на основе статистики слов и эвристик.
Отчет: описание функций и структуры приложения, результаты тестов, программа и комментарий к ней.