Просмотр исходного кода

docs: Add OLLAMA_CONTEXT_LENGTH to FAQ. (#9545)

frob 1 месяц назад
Родитель
Сommit
d8a5d96b98
1 измененных файлов с 1 добавлено и 1 удалено
  1. 1 1
      docs/faq.md

+ 1 - 1
docs/faq.md

@@ -20,7 +20,7 @@ Please refer to the [GPU docs](./gpu.md).
 
 ## How can I specify the context window size?
 
-By default, Ollama uses a context window size of 2048 tokens.
+By default, Ollama uses a context window size of 2048 tokens. This can be overridden with the `OLLAMA_CONTEXT_LENGTH` environment variable. For example, to set the default context length to 8K, use: `OLLAMA_CONTEXT_LENGTH=8192 ollama serve`.
 
 To change this when using `ollama run`, use `/set parameter`: