「ForesightNews」微软开源 Deep Speed Chat,可帮助用户训练类 ChatGPT 等大语言模型
「ForesightNews」据ForesightNews报道,微软宣布开源DeepspeedChat,可以帮助用户训练ChatGPT等大语言模型。Deepspedchat是基于微软Depsped深度学习优化库开发的,具有训练、强化推理等功能,还采用RLHF(人工反馈机制强化学习)技术,可将训练速度提高15倍以上,但成本大大降低。比如ChatGPT模型参数130亿,训练只需1.25小时即可完成。