 Sam
|
1bdab9fdb1
llm: introduce k/v context quantization (vRAM improvements) (#6279)
|
hace 5 meses |
 Jeffrey Morgan
|
55ea963c9e
update default model to llama3.2 (#6959)
|
hace 7 meses |
 Patrick Devine
|
5804cf1723
documentation for stopping a model (#6766)
|
hace 7 meses |
|
Jeffrey Morgan
|
83a9b5271a
docs: update examples to use llama3.1 (#6718)
|
hace 7 meses |
 SnoopyTlion
|
741affdfd6
docs: update faq.md for OLLAMA_MODELS env var permissions (#6587)
|
hace 8 meses |
 Michael Yang
|
bb362caf88
update faq
|
hace 10 meses |
 Daniel Hiltgen
|
1a83581a8e
Merge pull request #5895 from dhiltgen/sched_faq
|
hace 9 meses |
|
Jeffrey Morgan
|
0e4d653687
upate to `llama3.1` elsewhere in repo (#6032)
|
hace 9 meses |
 Daniel Hiltgen
|
830fdd2715
Better explain multi-gpu behavior
|
hace 9 meses |
|
Daniel Hiltgen
|
1f50356e8e
Bump ROCm on windows to 6.1.2
|
hace 9 meses |
|
Daniel Hiltgen
|
69c04eecc4
Add windows radeon concurreny note
|
hace 10 meses |
|
Daniel Hiltgen
|
aae56abb7c
Document concurrent behavior and settings
|
hace 10 meses |
 Patrick Devine
|
3bade04e10
doc updates for the faq/troubleshooting (#4565)
|
hace 11 meses |
|
Patrick Devine
|
f1548ef62d
update the FAQ to be more clear about windows env variables (#4415)
|
hace 11 meses |
 Jeffrey Chen
|
d091fe3c21
Windows automatically recognizes username (#3214)
|
hace 1 año |
|
Daniel Hiltgen
|
20f6c06569
Make maximum pending request configurable
|
hace 1 año |
 Dr Nic Williams
|
e8aaea030e
Update 'llama2' -> 'llama3' in most places (#4116)
|
hace 1 año |
|
Patrick Devine
|
74d2a9ef9a
add OLLAMA_KEEP_ALIVE env variable to FAQ (#3865)
|
hace 1 año |
|
Patrick Devine
|
1b272d5bcd
change `github.com/jmorganca/ollama` to `github.com/ollama/ollama` (#3347)
|
hace 1 año |
|
Daniel Hiltgen
|
d8fdbfd8da
Add docs for GPU selection and nvidia uvm workaround
|
hace 1 año |
 Bruce MacDonald
|
a5ba0fcf78
doc: faq gpu compatibility (#3142)
|
hace 1 año |
|
Jeffrey Morgan
|
3a30bf56dc
Update faq.md
|
hace 1 año |
|
Jeffrey Morgan
|
7ed3e94105
Update faq.md
|
hace 1 año |
|
jmorganca
|
2297ad39da
update `faq.md`
|
hace 1 año |
|
Daniel Hiltgen
|
b53229a2ed
Add docs explaining GPU selection env vars
|
hace 1 año |
|
Jeffrey Morgan
|
f0425d3de9
Update faq.md
|
hace 1 año |
|
Jeffrey Morgan
|
df56f1ee5e
Update faq.md
|
hace 1 año |
|
Jeffrey Morgan
|
41aca5c2d0
Update faq.md
|
hace 1 año |
|
Patrick Devine
|
9a7a4b9533
add faqs for memory pre-loading and the keep_alive setting (#2601)
|
hace 1 año |
|
Daniel Hiltgen
|
b338c0635f
Document setting server vars for windows
|
hace 1 año |
