Automatically updated from 모델 배포(529:tensorflow-fashion-mnist) by 그룹사용자(groupuser)
This commit is contained in:
parent
7dadb85aeb
commit
470e8ecbcb
57
config.pbtxt
57
config.pbtxt
@ -1,21 +1,62 @@
|
|||||||
# Triton backend to use
|
# Triton backend to use
|
||||||
name: "tensorflow-fashion-mnist"
|
name: "Llama-3.2-1B-Instruct"
|
||||||
backend: "tensorflow"
|
backend: "python"
|
||||||
platform: "tensorflow_savedmodel"
|
|
||||||
max_batch_size: 0
|
max_batch_size: 0
|
||||||
|
|
||||||
input [
|
input [
|
||||||
{
|
{
|
||||||
name: "test1"
|
name: "text_input"
|
||||||
data_type: TYPE_UINT8
|
data_type: TYPE_STRING
|
||||||
|
dims: [ -1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "max_length"
|
||||||
|
data_type: TYPE_INT32
|
||||||
|
dims: [ 1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "max_new_tokens"
|
||||||
|
data_type: TYPE_INT32
|
||||||
|
dims: [ 1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "do_sample"
|
||||||
|
data_type: TYPE_BOOL
|
||||||
|
dims: [ 1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "top_k"
|
||||||
|
data_type: TYPE_INT32
|
||||||
|
dims: [ 1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "top_p"
|
||||||
|
data_type: TYPE_FP32
|
||||||
|
dims: [ 1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "temperature"
|
||||||
|
data_type: TYPE_FP32
|
||||||
|
dims: [ 1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "repetition_penalty"
|
||||||
|
data_type: TYPE_FP32
|
||||||
|
dims: [ 1 ]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "stream"
|
||||||
|
data_type: TYPE_BOOL
|
||||||
dims: [ 1 ]
|
dims: [ 1 ]
|
||||||
reshape {
|
|
||||||
shape: [ 1 ]
|
|
||||||
}
|
|
||||||
}
|
}
|
||||||
]
|
]
|
||||||
|
|
||||||
output [
|
output [
|
||||||
|
{
|
||||||
|
name: "text_output"
|
||||||
|
data_type: TYPE_STRING
|
||||||
|
dims: [ -1 ]
|
||||||
|
}
|
||||||
]
|
]
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
Loading…
Reference in New Issue
Block a user