通俗易懂地说说DeepSeek的原理
DeepSeek 是一款在 AI 领域表现卓越的语言模型，它不仅性能超越 OpenAI 的 ChatGPT，在 App Store 下载排行榜中位居第一。其训练过程包括预训练和后训练两阶段，通过预测互联网文本数据中的下一个 Token 来学习语言规律，并采用指令微调和基于人类反馈的强化学习进行后训练优化。
指令微调
NeurIPS 2024 让大语言模型使用代码解决图分析推理任务
本文提出了一种通过编程来提升大模型解决图分析推理任务能力的方法，并展示了在开源和闭源模型上进行实验的结果，使用新的基准数据集ProGraph验证了这一方法的有效性。