Commit History

Автор SHA1 Съобщение Дата
  Daniel Hiltgen 434dfe30c5 Reintroduce nvidia nvml library for windows преди 11 месеца
  Wang,Zhe fd5971be0b support ollama run on Intel GPUs преди 11 месеца
  Daniel Hiltgen 8727a9c140 Record more GPU information преди 1 година
  Daniel Hiltgen 089daaeabc Add CUDA Driver API for GPU discovery преди 1 година
  Daniel Hiltgen 34b9db5afc Request and model concurrency преди 1 година
  Jeremy dfc6721b20 add support for libcudart.so for CUDA devices (adds Jetson support) преди 1 година
  Daniel Hiltgen 6c5ccb11f9 Revamp ROCm support преди 1 година
  Daniel Hiltgen 9d7b5d6c91 Ignore AMD integrated GPUs преди 1 година
  Daniel Hiltgen 987c16b2f7 Report more information about GPUs in verbose mode преди 1 година
  Jeffrey Morgan c336693f07 calculate overhead based number of gpu devices (#1875) преди 1 година
  Daniel Hiltgen a2ad952440 Fix windows system memory lookup преди 1 година
  Daniel Hiltgen 35934b2e05 Adapted rocm support to cgo based llama.cpp преди 1 година