Skip to content

DariaHighfly/Tokenazer

Repository files navigation

Веб сегментатор и токенизатор

Задача

Реализовать на одном из языков программирования собственный графематический анализатор для русскоязычных текстов (токенизация и/или сегментация на предложения) и протестировать его на реальных текстах.

Для разработки графематического анализатора необходимо было реализовать программу, которая принимала бы текст и некоторые параметры вида разбиения и разбивала бы его на токены; и интерфейс, где пользователь мог бы завести текст для обработки и установить необходимые параметры. Для работы я решила использовать язык программирование JavaScript, языки разметки и стилей HTML и CSS и фреймворк Vue.js. Для создания сервера использовались Node.js и бесплатный хостинг Heroku.

Отчет о проделанной работе находится в файле Report.pdf

Ссылка на сервис:

https://dariahighflytokengen.herokuapp.com/#/

Сборка и запуск проекта локально:

# install dependencies
npm install

# run your serve
npm start

About

No description, website, or topics provided.

Resources

Stars

0 stars

Watchers

1 watching

Forks

Releases

No releases published

Packages

 
 
 

Contributors