{ "per_channel": true, "reduce_range": true, "per_model_config": { "encoder_model": { "op_types": [ "Sub", "Add", "Constant", "Einsum", "Tanh", "Greater", "Cast", "Div", "Softmax", "Pad", "Gather", "Mod", "Sqrt", "Where", "ConstantOfShape", "And", "MatMul", "Mul", "Concat", "Reshape", "Unsqueeze", "Transpose", "Shape", "ReduceMean", "Pow", "Slice", "Neg" ], "weight_type": "QInt8" }, "decoder_model": { "op_types": [ "Sub", "Add", "Constant", "Expand", "Log", "Tanh", "Cast", "Div", "Softmax", "LessOrEqual", "Gather", "Sqrt", "Range", "Where", "ConstantOfShape", "Less", "MatMul", "Mul", "Concat", "Reshape", "Min", "Unsqueeze", "Transpose", "Shape", "ReduceMean", "Pow", "Tile", "Neg" ], "weight_type": "QInt8" }, "decoder_with_past_model": { "op_types": [ "Add", "Sub", "Constant", "Expand", "Log", "Tanh", "Cast", "Div", "Softmax", "LessOrEqual", "Gather", "Sqrt", "Range", "Where", "ConstantOfShape", "Less", "MatMul", "Mul", "Concat", "Reshape", "Min", "Unsqueeze", "Transpose", "Shape", "ReduceMean", "Pow", "Slice", "Tile", "Neg" ], "weight_type": "QInt8" }, "decoder_model_merged": { "op_types": [ "Sub", "Add", "Constant", "Expand", "Log", "Tanh", "Cast", "Div", "Softmax", "If", "LessOrEqual", "Gather", "Sqrt", "Range", "Where", "ConstantOfShape", "Less", "MatMul", "Mul", "Concat", "Reshape", "Min", "Unsqueeze", "Transpose", "Shape", "ReduceMean", "Pow", "Slice", "Tile", "Neg" ], "weight_type": "QInt8" } } }