Технології статистичного опрацювання текстів та методика їх навчання

Abstract

У статті розглядаються особливості методики навчання технологій статистичного опрацювання текстових даних у процесі підготовки майбутніх фахівців з прикладної лінгвістики. Описані базові операції кількісного опрацювання текстів та запропоновано можливий підхід до їх реалізації з використанням мови програмування Python. Обґрунтовано доцільність використання мови Python та ресурсів платформи NLTK (Natural Language Toolkit) для виконання завдань комп’ютерної лінгвістики. Розглядається задача опрацювання текстового файлу з метою обчислення деяких кількісних параметрів та наводяться відповідні програмні коди.

В статье рассматриваются особенности методики обучения технологиям статистической обработки текстовых данных в процессе подготовки будущих специалистов по прикладной лингвистике. Описаны базовые операции количественной обработки текстов и предложен возможный поход к их реализации с использованием языка программирования Python. Обоснована целесообразность использования языка Python и ресурсов платформы NLTK (Natural Language Toolkit) для выполнения заданий компьютерной лингвистики. Рассматривается задача обработки текстового файла с целью вычисления некоторых количественных параметров и приводятся соответствующие программные коды.

The article highlights the peculiarities of teaching methods of statistical text processing techniques in the process of training future specialists in Applied Linguistics. Basic operations of quantitative text processing have been outlined and a possible approach to applying them by means of Python programming language has been suggested. The appropriateness of using Python and the NLTK (Natural Language Toolkit) platform resources for solving problems in computational linguistics has been substantiated. The author considers the task of the text file processing to calculate some quantitative parameters and suggests relative program codes.