From 8f83ce838065fa2b75061daaee41ce3536e0d0cd Mon Sep 17 00:00:00 2001 From: rabidcopy Date: Wed, 22 Mar 2023 18:53:10 -0500 Subject: [PATCH] remove newline token --- llama.h | 1 - 1 file changed, 1 deletion(-) diff --git a/llama.h b/llama.h index ce7f5a49a..3df9ed1fd 100644 --- a/llama.h +++ b/llama.h @@ -114,7 +114,6 @@ extern "C" { // Special tokens LLAMA_API llama_token llama_token_bos(); LLAMA_API llama_token llama_token_eos(); - LLAMA_API llama_token llama_token_newline(); // TODO: improve the last_n_tokens interface ? LLAMA_API llama_token llama_sample_top_p_top_k(