通义千问

定制数据格式

1. messages

用户可以直接采用messages格式的数据集进行微调训练，具体使用方式如下：

{"messages": [{"role": "system", "content": "You are a helpful assistant"}, {"role": "user", "content": "谁在文艺复兴时期绘制人体?"}, {"role": "assistant", "content": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动，在这个时期，许多艺术家都绘制了人体。"}]}
{"messages": [{"role": "system", "content": "You are a helpful assistant"}, {"role": "user", "content": "I need a picture of someone crying."}, {"role": "assistant", "content": "I'm sorry, but as an AI language model, I do not have the ability to display images."}]}

需要注意的是：

• 针对role为system的情况可以空缺，不传。即，可以如下使用方式

{"messages": [{"role": "user", "content": "谁在文艺复兴时期绘制人体?"}, {"role": "assistant", "content": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动，在这个时期，许多艺术家都绘制了人体。"}]}

• role为user和role为assistant需要成对顺序出现，如下是两个错误的示例：

{"messages": [{"role": "system", "content": "You are a helpful assistant"}, {"role": "user", "content": "谁在文艺复兴时期绘制人体?"}, {"role": "user", "content": "还有制造雕塑的有谁？"},{"role": "assistant", "content": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动，在这个时期，许多艺术家都绘制了人体。"}]}

{"messages": [{"role": "system", "content": "You are a helpful assistant"}, {"role": "user", "content": "谁在文艺复兴时期绘制人体?"}, {"role": "assistant", "content": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动，在这个时期，许多艺术家都绘制了人体。"},{"role": "assistant", "content": "文艺复兴时期的雕塑也非常有名，是否需要我给你推荐？"}]}

• user-assistant交流根据历史聊天记录顺序可支持多轮聊天，如下示例：

{"messages": [{"role": "system", "content": "You are a helpful assistant"}, {"role": "user", "content": "谁在文艺复兴时期绘制人体?"}, {"role": "assistant", "content": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动，在这个时期，许多艺术家都绘制了人体。"},{"role": "user", "content": "那雕塑方面如何呢？"}, {"role": "assistant", "content": "文艺复兴时期的雕塑也非常有名，几位世界级的雕塑大师都出自于这个时期"}]}

2. prompt-completion

针对可以被归类为续写任务的场景，利用text-generation任务即可满足要求的情况，或者单轮对话即可完成的任务，可以选择以下方式进行数据准备。要求准备prompt以及 completion两个参数，具体使用方式如下图所示。

{"prompt": "谁在文艺复兴时期绘制人体?", "completion": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动，在这个时期，许多艺术家都绘制了人体。"}
{"prompt": "I need a picture of someone crying.", "completion": "I'm sorry, but as an AI language model, I do not have the ability to display images."}

3. human-assistant (legacy formatting, deprecating)

针对历史用户，可以继续使用该数据格式进行训练任务，新用户建议采用以上两种方式。

在准备sft训练数据阶段的过程中需要构造出对话的结构，需要包含Human: 以及Assistant:两个特殊符值，并且在两个值前均加上换行字符\n\n，注意\n\n与特殊符值间没有额外空格等符号。

同时，将问题或者描述紧跟放在Human: 后，将预期返回的答案放在Assistant:后，注意Assistant:与前面的文本仅有\n\n，没有额外空格等符号。

具体参考实例如下：

{"text": "\n\nHuman: 谁在文艺复兴时期绘制人体\n\nAssistant: 文艺复兴时期是一个关于艺术、文化和学术的复兴运动，在这个时期，许多艺术家都绘制了人体。"}
{"text": "\n\nHuman: I need a picture of someone crying.\n\nAssistant: I'm sorry, but as an AI language model, I do not have the ability to display images."}