Преглед на файлове

fix hanging on single string

Roy Han преди 10 месеца
родител
ревизия
c697eb2a9b
променени са 1 файла, в които са добавени 4 реда и са изтрити 0 реда
  1. 4 0
      llm/ext_server/server.cpp

+ 4 - 0
llm/ext_server/server.cpp

@@ -3188,6 +3188,10 @@ int main(int argc, char **argv) {
                     prompt = "";
                 }
 
+                if (prompt.size() == 1) {
+                    prompt = prompt[0];
+                }
+
                 // create and queue the task
                 json responses;
                 {