Commit History

Автор SHA1 Съобщение Дата
  Daniel Hiltgen 9b5a3c5991 Merge pull request #3914 from dhiltgen/mac_perf преди 1 година
  Jeffrey Morgan 00b0699c75 Reload model if `num_gpu` changes (#3920) преди 1 година
  Daniel Hiltgen b123be5b71 Adjust context size for parallelism преди 1 година
  Bryce Reitano 36a6daccab Restructure loading conditional chain преди 1 година
  Bryce Reitano 284e02bed0 Move ggml loading to when we attempt fitting преди 1 година
  Daniel Hiltgen 34b9db5afc Request and model concurrency преди 1 година