Historial de Commits

Autor SHA1 Mensaje Fecha
  Michael Yang eae3af6807 clean up convert tokenizer hace 8 meses
  Michael Yang 3eb08377f8 detect chat template from configs that contain lists hace 8 meses
  Michael Yang 5a28b9cf5f bert hace 11 meses
  Michael Yang d8e2664c33 convert: fix parse functions hace 9 meses
  Michael Yang eafc607abb convert: only extract large files hace 10 meses
  Michael Yang df993fa37b comments hace 10 meses
  Michael Yang 5e9db9fb0b refactor convert hace 11 meses
  Michael Yang c895a7d13f some gocritic hace 11 meses
  Ikko Eltociear Ashimine 955c317cab chore: update tokenizer.go (#4571) hace 11 meses
  Michael Yang bbbd9f20f3 cleanup hace 11 meses
  Michael Yang 547132e820 bpe pretokenizer hace 11 meses
  Patrick Devine 2d315ba9a9 add missing file hace 1 año