Нужно убрать из текста все не информативные слова
есть массив слов составленных из текста
нужно удалить из него все не информативные слова такие как:
а, но, я, мы, твой, о, и, через и тд
аналогично и для английского:
the, at, above, into, we, hers и тд
может кому попадался список таких слов
нужно удалить из него все не информативные слова такие как:
а, но, я, мы, твой, о, и, через и тд
аналогично и для английского:
the, at, above, into, we, hers и тд
может кому попадался список таких слов
по идее есть два пути решения
более разумно ориентироваться на не информативные слова
- удаление всех не информативных слов
- поиск всех информативных и сохранение их
более разумно ориентироваться на не информативные слова
- местоимения
- предлоги
- числительные
Когда-то делал подобное, когда писал программу для дискурсного анализа. Для отсева использовал словари служебных слов (числительные, местоимения).
