调优数据上传规则

普通 ChatML

普通 ChatML 格式样例（system/user/assistant 多轮对话）：

{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入1"}]},
    {"role": "user", "content": [{"text": "用户输入1"}]},
    {"role": "assistant", "content": [{"text": "期望的模型输出1"}]},
    {"role": "user", "content": [{"text": "用户输入2"}]},
    {"role": "assistant", "content": [{"text": "期望的模型输出2"}]}
  ]
}

深度思考（thinking）

深度思考（thinking）格式样例（思考标签放最后一条 assistant，前后换行必须保留）：

{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入1"}]},
    {"role": "user", "content": [{"text": "用户输入1"}]},
    {"role": "assistant", "content": [{"text": "模型输出1"}]},
    {"role": "user", "content": [{"text": "用户输入2"}]},
    {"role": "assistant", "content": [{"text": "<think>\n期望的思考内容2\n</think>\n\n期望的输出2"}]}
  ]
}

深度思考内容用 <think>…</think> 标签包裹，置于 assistant 输出文本内（与最终答复同属最后一条 assistant 的 content）。规则：

• 只能放在最后一条 assistant 输出中；中间的 assistant 输出不加思考标签。

• 思考标签前后的换行符必须保留。

• 若训练样本设置模型不输出思考标签，训练完成后不建议再开启思考模式调用。

工具调用（function calling）

工具调用（function calling）格式样例（tools 定义 + messages 多轮含 tool 角色，tool_call_id 一一对应）：

{
  "tools": [
    {
      "type": "function",
      "function": {
        "name": "get_weather",
        "description": "查询指定城市的实时天气",
        "parameters": {
          "type": "object",
          "properties": {
            "city": {"type": "string", "description": "城市名称，例如：北京"}
          },
          "required": ["city"]
        }
      }
    }
  ],
  "messages": [
    {"role": "user", "content": [{"text": "帮我查一下北京的天气"}]},
    {
      "role": "assistant",
      "content": [{"text": "好的，我来帮您查询北京的天气。"}],
      "tool_calls": [
        {
          "id": "call_3a11c1ba883b41b6a4e0cb",
          "type": "function",
          "function": {
            "name": "get_weather",
            "arguments": "{\"city\": \"北京\"}"
          }
        }
      ]
    },
    {"role": "tool", "tool_call_id": "call_3a11c1ba883b41b6a4e0cb", "content": [{"text": "{\"city\": \"北京\", \"weather\": \"晴\", \"temperature\": \"25℃\"}"}]},
    {"role": "assistant", "content": [{"text": "北京今天天气晴朗，气温 25℃，适合出行。"}]}
  ]
}

工具字段说明

工具调用（function calling）模式在 messages 多轮结构基础上增加 tools 定义与 tool_calls/role:tool 机制，字段约束如下：

• tools：工具定义数组，每项含 type:"function" 与 function{name, description, parameters}；parameters 为 JSON Schema（含 type/properties/required）。

• messages：多轮对话数组，角色含 user、assistant、tool。

• content：多模态内容数组，可含 image、text、video 等项（与多模态理解格式一致）。

• assistant.tool_calls：模型生成的工具调用数组，含 id、type:"function"、function{name, arguments}；arguments 为 JSON 字符串。

• role:"tool"：工具返回，tool_call_id 必须与对应 tool_calls[].id 一一对应，content 内为工具返回结果。

多轮对话最后一条通常为 assistant 基于工具返回的最终答复。

loss_weight 字段约束：

• 邀测参数，取值范围 0.0 至 1.0，数值越大表示该行在训练时的相对重要性越高。

• SFT 思考模型仅最后一条 assistant 行支持 loss_weight。

• 如需使用请联系商务经理。

百炼不支持 OpenAI 的 name、weight 参数，所有 assistant 输出都会被训练。从 OpenAI/Azure 迁移的训练数据不可携带 name/weight 字段。

数据多样性与均衡性建议：各场景数据数量应相对均衡，数据比例符合实际场景比例，避免某一类数据过多导致模型偏向于学习该类特征，影响泛化能力。

工具与思考组合

工具与思考组合格式样例（工具调用与深度思考同时出现，思考标签与 tool_calls 在同一条 assistant）：

{
  "tools": [
    {
      "type": "function",
      "function": {
        "name": "get_weather",
        "description": "查询指定城市的实时天气",
        "parameters": {
          "type": "object",
          "properties": {
            "city": {"type": "string", "description": "城市名称，例如：北京"}
          },
          "required": ["city"]
        }
      }
    }
  ],
  "messages": [
    {
      "role": "user",
      "content": [
        {"text": "帮我查一下北京的天气"}
      ]
    },
    {
      "role": "assistant",
      "content": [
        {"text": "<think>\n用户询问北京天气，调用 get_weather 工具获取实时数据\n</think>\n"}
      ],
      "tool_calls": [
        {
          "id": "call_3a11c1ba883b41b6a4e0cb",
          "type": "function",
          "function": {
            "name": "get_weather",
            "arguments": "{\"city\": \"北京\"}"
          }
        }
      ]
    },
    {
      "role": "tool",
      "tool_call_id": "call_3a11c1ba883b41b6a4e0cb",
      "content": [
        {"text": "{\"city\": \"北京\", \"weather\": \"晴\", \"temperature\": \"25℃\"}"}
      ]
    },
    {
      "role": "assistant",
      "content": [
        {"text": "北京今天天气晴朗，气温 25℃，适合出行。"}
      ]
    }
  ]
}

图片加文本

图片加文本格式样例（content 数组含图片项与文本项）：

{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入"}]},
    {
      "role": "user",
      "content": [
        {"text": "用户输入1"},
        {"image": "图像文件名1.jpg", "resized_width": 200, "resized_height": 200}
      ]
    },
    {"role": "assistant", "content": [{"text": "期望的模型输出1"}]}
  ]
}

图片加思考

图片加思考格式样例（规则见SFT 文本格式）：

{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入"}]},
    {
      "role": "user",
      "content": [
        {"text": "这张图片是什么？"},
        {"image": "image1.jpg"}
      ]
    },
    {
      "role": "assistant",
      "content": [
        {"text": "<think>\n图片为城市风景，需进一步分析\n</think>\n\n该图片为北京天安门广场。"}
      ]
    }
  ]
}

图片加工具

图片加工具格式样例（含图片多模态 content 项与工具调用机制，JSON 逐字保留）：

{
  "tools": [
    {
      "type": "function",
      "function": {
        "name": "get_weather",
        "description": "查询指定城市的实时天气",
        "parameters": {
          "type": "object",
          "properties": {
            "city": {"type": "string", "description": "城市名称，例如：北京"}
          },
          "required": ["city"]
        }
      }
    }
  ],
  "messages": [
    {
      "role": "user",
      "content": [
        {"image": "beijing.jpeg"},
        {"text": "这张图片是哪个城市？帮我查一下它现在的天气"}
      ]
    },
    {
      "role": "assistant",
      "content": [
        {"text": "我需要通过图片判断图片归属的城市"}
      ],
      "tool_calls": [
        {
          "id": "call_3a11c1ba883b41b6a4e0cb",
          "type": "function",
          "function": {
            "name": "get_weather",
            "arguments": "{\"city\": \"北京\"}"
          }
        }
      ]
    },
    {
      "role": "tool",
      "tool_call_id": "call_3a11c1ba883b41b6a4e0cb",
      "content": [
        {"text": "{\"city\": \"北京\", \"weather\": \"晴\", \"temperature\": \"25℃\"}"}
      ]
    },
    {
      "role": "assistant",
      "content": [
        {"text": "北京今天天气晴朗，气温 25℃，适合出行。"}
      ]
    }
  ]
}

视频文件路径模式

视频文件路径模式格式样例（video 字段为视频文件路径字符串）：

{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入"}]},
    {
      "role": "user",
      "content": [
        {"text": "用户输入1"},
        {"video": "视频文件名1.mp4", "fps": 3.0, "resized_width": 200, "resized_height": 200, "video_start": 0.0, "video_end": 3.0}
      ]
    },
    {"role": "assistant", "content": [{"text": "期望的模型输出1"}]}
  ]
}

图片帧列表模式

图片帧列表模式格式样例（video 为帧列表，含 sample_fps）：

{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入"}]},
    {
      "role": "user",
      "content": [
        {"text": "用户输入2"},
        {"video": ["0.jpg", "1.jpg", "2.jpg", "3.jpg"], "sample_fps": 5.0, "resized_width": 200, "resized_height": 200}
      ]
    },
    {"role": "assistant", "content": [{"text": "期望的模型输出2"}]}
  ]
}

视频加思考

视频加思考格式样例，思考标签规则详见SFT 文本生成训练数据。

{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入"}]},
    {
      "role": "user",
      "content": [
        {"text": "这段视频讲了什么？"},
        {"video": "video1.mp4"}
      ]
    },
    {
      "role": "assistant",
      "content": [
        {"text": "<think>\n视频内容为城市夜景，包含交通场景\n</think>\n\n该视频展示夜间城市交通。"}
      ]
    }
  ]
}