diff --git a/examples/gpt4all.sh b/examples/gpt4all.sh index d974f95a9..b3604f200 100755 --- a/examples/gpt4all.sh +++ b/examples/gpt4all.sh @@ -7,9 +7,8 @@ cd `dirname $0` cd .. -./main --color --instruct --threads 4 \ - --model ./models/gpt4all-7B/gpt4all-lora-quantized.bin \ - --file ./prompts/alpaca.txt \ +./main --color --instruct --threads 6 \ + --model ./models/gpt4all.bin \ --batch_size 8 --ctx_size 2048 \ --repeat_last_n 64 --repeat_penalty 1.3 \ - --n_predict 128 --temp 0.1 --top_k 40 --top_p 0.95 + --n_predict 2048 --temp 0.1 --top_k 40 --top_p 0.95 --mlock