tokens

Unidade mínima de informação ou significado em um texto ou sequência de dados. Em linguística computacional, é uma palavra, pontuação ou outro elemento significativo em um texto. Em criptografia e blockchain, representa uma unidade de valor ou um registro.