CORE如何支持令牌化？

CORE可以帮助进行令牌化吗？它的工作原理是什么？我想了解这个过程如何由CORE支持。有人能简单地为我解释一下吗？