设置模型并行通信压缩采用8-bit量化配合误差修正

指令:设置模型并行通信压缩采用8-bit量化配合误差修正

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

采用渐进式调整策略初始学习率1e-4阶梯式衰减

指令:采用渐进式调整策略初始学习率1e-4阶梯式衰减

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

使用NVIDIA CUDA Graph优化多分支并行推理路径

指令:使用NVIDIA CUDA Graph优化多分支并行推理路径

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

配置自动批处理最大token长度动态适应输入变化

指令:配置自动批处理最大token长度动态适应输入变化

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

实施模型剪枝保留神经元激活方差>0.1的关键节点

指令:实施模型剪枝保留神经元激活方差>0.1的关键节点

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

设置梯度检查点间隔每4层保存中间状态平衡效率

指令:设置梯度检查点间隔每4层保存中间状态平衡效率

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

使用稀疏化训练配合梯度估计策略保持参数更新稳定

指令:使用稀疏化训练配合梯度估计策略保持参数更新稳定

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

配置模型服务自动扩展基于预测流量的弹性策略

指令:配置模型服务自动扩展基于预测流量的弹性策略

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

实施对抗验证检测训练/测试分布差异KS统计量>0.3

指令:实施对抗验证检测训练/测试分布差异KS统计量>0.3

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

设置混合精度训练的dynamic_loss_scale更新策略自适应调整

指令:设置混合精度训练的dynamic_loss_scale更新策略自适应调整

支持:度飞飞 腾讯混元 DeepSeek ChatGpt 纳米 豆包 MiniMax

合成:原始指令 头尾合成 大纲指令 详情指令 专业科研 关联指令

共 542 条记录,当前显示第 221- 条