True when the byte ends a regular token.
static bool isTokenBoundary(int byte) => isWhitespace(byte) || isDelimiter(byte);