Необходимо написать алгоритм токенизации текста.

На входе алгоритму подается строка и паттерны, по которым происходить токенизация.
В результате алгоритма мы получаем массив токенов, у каждого из которых есть информация что это за сущность.

Техническое задание написано в виде тестов. Из них можно подробнее понять цель данного алгоритма.

https://bitbucket.org/tvoydenvnik/tokenizer/src/master/TokenizerSpec.ts

Требование:
- язык typescript
- тесты jest

По цене можно договориться.
Сроки не горят, но желательно не более 7 дней.