Nie ma wątpliwości, tokenizacja jest nieunikniona.