diff --git a/LLama/Native/llama_vocab_pre_type.cs b/LLama/Native/llama_vocab_pre_type.cs index 5d075d67..7f08fb35 100644 --- a/LLama/Native/llama_vocab_pre_type.cs +++ b/LLama/Native/llama_vocab_pre_type.cs @@ -6,7 +6,12 @@ ///// llama_vocab_pre_type //public enum llama_vocab_pre_type //{ -// LLAMA_VOCAB_PRE_TYPE_DEFAULT = 0, +// /// +// /// Default pre tokenization type +// /// +// /// LLAMA_VOCAB_PRE_TYPE_DEFAULT +// Default = 0, +// // LLAMA_VOCAB_PRE_TYPE_LLAMA3 = 1, // LLAMA_VOCAB_PRE_TYPE_DEEPSEEK_LLM = 2, // LLAMA_VOCAB_PRE_TYPE_DEEPSEEK_CODER = 3,