Michael Yang 4a565cbf94 add chat and generate tests with mock runner 9 månader sedan
..
ext_server b9f5e16c80 Introduce `/api/embed` endpoint supporting batch embedding (#5127) 9 månader sedan
generate efbf41ed81 llm: dont link cuda with compat libs (#5621) 9 månader sedan
llama.cpp @ a8db2a9ce6 571dc61955 Update llama.cpp submodule to `a8db2a9c` (#5530) 9 månader sedan
patches 571dc61955 Update llama.cpp submodule to `a8db2a9c` (#5530) 9 månader sedan
filetype.go d6f692ad1a Add support for IQ1_S, IQ3_S, IQ2_S, IQ4_XS. IQ4_NL (#4322) 11 månader sedan
ggla.go cb42e607c5 llm: speed up gguf decoding by a lot (#5246) 10 månader sedan
ggml.go 5a739ff4cb chatglm graph 9 månader sedan
ggml_test.go cb42e607c5 llm: speed up gguf decoding by a lot (#5246) 10 månader sedan
gguf.go 4a565cbf94 add chat and generate tests with mock runner 9 månader sedan
llm.go 10e768826c fix: quant err message (#5616) 9 månader sedan
llm_darwin_amd64.go 58d95cc9bd Switch back to subprocessing for llama.cpp 1 år sedan
llm_darwin_arm64.go 58d95cc9bd Switch back to subprocessing for llama.cpp 1 år sedan
llm_linux.go 58d95cc9bd Switch back to subprocessing for llama.cpp 1 år sedan
llm_windows.go 058f6cd2cc Move nested payloads to installer and zip file on windows 1 år sedan
memory.go 8e0641a9bf handle asymmetric embedding KVs 10 månader sedan
memory_test.go cb42e607c5 llm: speed up gguf decoding by a lot (#5246) 10 månader sedan
payload.go 0e982bc1f4 Fix corner cases on tmp cleaner on mac 10 månader sedan
server.go b9f5e16c80 Introduce `/api/embed` endpoint supporting batch embedding (#5127) 9 månader sedan
status.go 4d71c559b2 fix error detection by limiting model loading error parsing (#5472) 10 månader sedan