Explorar o código

Set `NumKeep` to `4` by default (#982)

Jeffrey Morgan hai 1 ano
pai
achega
06589a3b30
Modificáronse 1 ficheiros con 1 adicións e 1 borrados
  1. 1 1
      api/types.go

+ 1 - 1
api/types.go

@@ -293,7 +293,7 @@ func DefaultOptions() Options {
 	return Options{
 		// options set on request to runner
 		NumPredict:       -1,
-		NumKeep:          0,
+		NumKeep:          4,
 		Temperature:      0.8,
 		TopK:             40,
 		TopP:             0.9,