:mod:`langchain.text_splitter`.TokenTextSplitter
=======================================================

.. currentmodule:: langchain.text_splitter

.. autoclass:: TokenTextSplitter

   
   
   .. rubric:: Methods

   .. autosummary::
   
      ~TokenTextSplitter.__init__
      ~TokenTextSplitter.atransform_documents
      ~TokenTextSplitter.create_documents
      ~TokenTextSplitter.from_huggingface_tokenizer
      ~TokenTextSplitter.from_tiktoken_encoder
      ~TokenTextSplitter.split_documents
      ~TokenTextSplitter.split_text
      ~TokenTextSplitter.transform_documents
   
   

   
   
   

.. example_links:: TokenTextSplitter