FROM ./zeref713/phi3_5_gsm8k_LORA_LATEST_gguf/unsloth.F16.gguf | |
TEMPLATE """{{ if .System }}<|system|> | |
{{ .System }}<|end|> | |
{{ end }}{{ if .Prompt }}<|user|> | |
{{ .Prompt }}<|end|> | |
{{ end }}<|assistant|> | |
{{ .Response }}<|end|> | |
""" | |
PARAMETER stop "<|end|>" | |
PARAMETER stop "<|user|>" | |
PARAMETER stop "<|assistant|>" | |
PARAMETER temperature 1.5 | |
PARAMETER min_p 0.1 |