'%3e%3cpath%20d='M12.6%208.6h9.2v3.6h-9.2zM21.4%207.9h2.4q.7%200%20.7.7v4q0%20.7-.7.7h-2.4zM12.9%208.6Q9%208.3%205.6%2011.2q3.9-.9%207.3%201z'/%3e%3cpath%20d='M15.4%2012.2h4.2l.5%205.4v7.2q0%201.4-1.4%201.4h-2.4q-1.4%200-1.4-1.4v-7.2z'/%3e%3c/g%3e%3c/svg%3e)
Hammer Meet Nail ################
############################
####################################
############ ############
########## ##########
######## ########
######## ########
####### #######
###### ######
####### #######
###### ########## ######
###### ################## ######
##### ##################### #####
##### ############################ #####
##### ################################## #####
###### ###################################### ######
##### ######################## #####
##### ######################## #####
##### ######################### #####
##### ########################## #####
##### ############################## #####
#### ################################# ####
#### ################################### ####
##### ################################### #####
##### ############ ################### #####
##### ############ ############### #####
##### ############## ############ #####
#### ############## ######### ####
#### ############## ####### ####
##### ################ ### #####
##### ################# #####
##### ################# #####
##### ################# #####
##### ################# #####
###### ################# ######
##### ################ #####
##### ################ #####
##### ################ #####
###### ############### ######
###### ############# ######
####### ########### #######
###### ######## ######
####### #######
######## ########
######## ########
########## ##########
############ ############
####################################
############################
################
to|kenTokenizer
Visualize and count tokens
Input
Tokens
o200k_base, tiktoken 0.14.0, OpenAI, MIT. gpt-oss’s o200k_harmony adds only special tokens.