Технічні аспекти опрацювання комп'ютером природомовної інформації

Abstract

Розглянуто технічні проблеми опрацювання комп’ютером природномовної інформації, які спричинені наявністю багатьох стандартів кодування символів та недотриманням користувачами орфографічних та пунктуаційних правил. Обґрунтовано необхідність попереднього технічного опрацювання таких текстів перед їхнім використанням як у наукових дослідженнях, так і у різних інформаційних системах. The article deals with technical problems of natural language information processing by computer caused by the presence of multiple character encoding standards and noncompliance by users with spelling and punctuation rules. The necessity of previous technical processing of such texts before their use in scientific researches as well as in various information systems has been grounded.