Parth Sareen
|
314573bfe8
config: allow setting context length through env var (#8938)
|
преди 2 месеца |
Michael Yang
|
58245413f4
next ollama runner (#7913)
|
преди 2 месеца |
Stefan Weil
|
abfdc4710f
all: fix typos in documentation, code, and comments (#7021)
|
преди 4 месеца |
Sam
|
1bdab9fdb1
llm: introduce k/v context quantization (vRAM improvements) (#6279)
|
преди 5 месеца |
Daniel Hiltgen
|
05cd82ef94
Rename gpu package discover (#7143)
|
преди 6 месеца |
Michael Yang
|
77903ab8b4
llama3.1
|
преди 9 месеца |
Michael Yang
|
b732beba6a
lint
|
преди 9 месеца |
Michael Yang
|
df993fa37b
comments
|
преди 9 месеца |
Michael Yang
|
5e9db9fb0b
refactor convert
|
преди 11 месеца |
Michael Yang
|
35b89b2eab
rfc: dynamic environ lookup
|
преди 10 месеца |
Blake Mizerany
|
cb42e607c5
llm: speed up gguf decoding by a lot (#5246)
|
преди 10 месеца |
Daniel Hiltgen
|
6f351bf586
review comments and coverage
|
преди 11 месеца |
Daniel Hiltgen
|
6fd04ca922
Improve multi-gpu handling at the limit
|
преди 11 месеца |