17 lines
423 B
Plaintext
17 lines
423 B
Plaintext
|
FROM ./llava-phi-3-mini-f16.gguf
|
||
|
|
FROM ./llava-phi-3-mini-mmproj-f16.gguf
|
||
|
|
TEMPLATE """{{ if .System }}<|system|>
|
||
|
|
{{ .System }}<|end|>
|
||
|
|
{{ end }}{{ if .Prompt }}<|user|>
|
||
|
|
{{ .Prompt }}<|end|>
|
||
|
|
{{ end }}<|assistant|>
|
||
|
|
{{ .Response }}<|end|>
|
||
|
|
"""
|
||
|
|
PARAMETER stop "<|user|>"
|
||
|
|
PARAMETER stop "<|assistant|>"
|
||
|
|
PARAMETER stop "<|system|>"
|
||
|
|
PARAMETER stop "<|end|>"
|
||
|
|
PARAMETER stop "<|endoftext|>"
|
||
|
|
|
||
|
|
PARAMETER num_keep 4
|
||
|
|
PARAMETER num_ctx 4096
|