 Jeffrey Morgan
|
8713ac23a8
allow overriding `template` and `system` in `/api/generate`
|
пре 1 година |
 Michael Yang
|
b9f4d67554
configurable rope frequency parameters
|
пре 1 година |
 Bruce MacDonald
|
1c5a8770ee
read runner parameter options from map
|
пре 1 година |
|
Jeffrey Morgan
|
528bafa585
cache loaded model
|
пре 1 година |
|
Bruce MacDonald
|
184ad8f057
allow specifying stop conditions in modelfile
|
пре 1 година |
|
Jeffrey Morgan
|
822a0e36eb
lower batch size to 512
|
пре 1 година |
|
Michael Yang
|
fadf75f99d
add stop conditions
|
пре 1 година |
|
Michael Yang
|
ad3a7d0e2c
add NumGQA
|
пре 1 година |
|
Jeffrey Morgan
|
688661ab9b
increase default batch size to 1024
|
пре 1 година |
|
Michael Yang
|
cca61181cb
sample metrics
|
пре 1 година |
|
Michael Yang
|
c490416189
lock on llm.lock(); decrease batch size
|
пре 1 година |
|
Michael Yang
|
f62a882760
add session expiration
|
пре 1 година |
|
Michael Yang
|
3003fc03fc
update predict code
|
пре 1 година |
|
Michael Yang
|
32aec66e6a
add load duration
|
пре 1 година |
|
Michael Yang
|
35af37a2cb
session id
|
пре 1 година |
|
Bruce MacDonald
|
4c1caa3733
download models when creating from modelfile
|
пре 1 година |
 Patrick Devine
|
4cb42ca55e
add copy command (#191)
|
пре 1 година |
|
Patrick Devine
|
9f6e97865c
allow pushing/pulling to insecure registries (#157)
|
пре 1 година |
|
Bruce MacDonald
|
7ba1308595
Merge pull request #147 from jmorganca/brucemacd/cli-err-display
|
пре 1 година |
|
Patrick Devine
|
e7a393de54
add rm command for models (#151)
|
пре 1 година |
|
Bruce MacDonald
|
ebaa33ac28
display gin api errors in cli
|
пре 1 година |
|
Michael Yang
|
68df36ae50
fix pull 0 bytes on completed layer
|
пре 1 година |
|
Patrick Devine
|
5bea29f610
add new list command (#97)
|
пре 1 година |
|
Patrick Devine
|
2fb52261ad
basic distribution w/ push/pull (#78)
|
пре 1 година |
|
Michael Yang
|
965f9ad033
Merge pull request #77 from jmorganca/mem
|
пре 1 година |
|
Michael Yang
|
5fefaa5d4d
fix typo
|
пре 1 година |
|
Michael Yang
|
1775647f76
continue conversation
|
пре 1 година |
|
Michael Yang
|
05e08d2310
return more info in generate response
|
пре 1 година |
|
Michael Yang
|
fd4792ec56
call llama.cpp directly from go
|
пре 1 година |
|
Jeffrey Morgan
|
a3ec1ec2a0
consistent error handling for pull and generate
|
пре 1 година |
