Historial de Commits

Autor SHA1 Mensaje Fecha
  Jesse Gross f66216e399 ggml: Support heterogeneous KV cache layer sizes in memory estimation hace 1 mes
  Parth Sareen 314573bfe8 config: allow setting context length through env var (#8938) hace 2 meses
  Michael Yang 58245413f4 next ollama runner (#7913) hace 2 meses
  Stefan Weil abfdc4710f all: fix typos in documentation, code, and comments (#7021) hace 4 meses
  Sam 1bdab9fdb1 llm: introduce k/v context quantization (vRAM improvements) (#6279) hace 5 meses
  Daniel Hiltgen 05cd82ef94 Rename gpu package discover (#7143) hace 6 meses
  Michael Yang 77903ab8b4 llama3.1 hace 9 meses
  Michael Yang b732beba6a lint hace 9 meses
  Michael Yang df993fa37b comments hace 9 meses
  Michael Yang 5e9db9fb0b refactor convert hace 11 meses
  Michael Yang 35b89b2eab rfc: dynamic environ lookup hace 10 meses
  Blake Mizerany cb42e607c5 llm: speed up gguf decoding by a lot (#5246) hace 10 meses
  Daniel Hiltgen 6f351bf586 review comments and coverage hace 11 meses
  Daniel Hiltgen 6fd04ca922 Improve multi-gpu handling at the limit hace 11 meses