本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
CohereCommand模型自定义超参数
CohereCommand和CohereCommand Light模型支持以下用于模型自定义的超参数。有关更多信息,请参阅自定义模型。
有关微调Cohere模型的信息,请参阅Cohere文档,网址为 https://docs.cohere.com/docs/fine-tuning
注意
epochCount
配额是可调整的。
超参数(控制台) | 超参数 (API) | 定义 | Type | 最低 | 最高 | 默认 |
---|---|---|---|---|---|---|
周期 | epochCount | 整个训练数据集的迭代次数 | 整数 | 1 | 100 | 1 |
批次大小 | batchSize | 更新模型参数之前处理的样本数 | 整数 | 8 | 8(命令) 32 (Light) |
8 |
学习率 | learningRate | 每个批次之后模型参数的更新速率。如果您使用验证数据集,我们建议您不要为提供值learningRate 。 |
float | 5.00E-6 | 0.1 | 1.00E-5 |
提前停止阈值 | earlyStoppingThreshold | 防止培训过程过早终止所需的最低损失改善 | float | 0 | 0.1 | 0.01 |
提早停止耐心 | earlyStoppingPatience | 停止训练过程之前损失指标停滞的容忍度 | 整数 | 1 | 10 | 6 |
评估百分比 | evalPercentage |
分配给模型评估的数据集的百分比(如果您未提供单独的验证数据集) |
float | 5 | 50 | 20 |