跳至内容
每时AI

每时AI

  • 资讯
  • 国际
  • 分享
  • 大模型
  • 学术
  • 开源
  • 机器人
  • 关于我们

GiantPandaCV

Tensor-005 CUTLASS简介

2025年4月12日19时 作者 GiantPandaCV

re进行矩阵计算, 通常我们需要按照如下流程逐步分块从GMEM加载矩阵块到SMEM再到寄存器文件,然

分类 学术 标签 CUDA、 CUTLASS、 任务初始化、 执行时间、 矩阵乘法、 随机数据填充 发表评论

Tensor-004 TensorCore编程及优化

2025年4月12日19时 作者 GiantPandaCV

代码的作者
Cuda-Samples
[1]
中的cudaTensorCoreGemm 代码
知乎:

分类 学术 标签 cuBLAS、 Double Buffer、 GFLOPs、 TensorCore、 异步拷贝、 矩阵计算 发表评论

Tensor-001 矩阵乘法分块乘法概述

2025年4月12日19时 作者 GiantPandaCV

别是Layout代数相关的内容, 后面再逐渐细化到一些硬件实现访存优化和一些算子融合相关的话题, 准

分类 学术 标签 CUDA、 SIMD指令集、 共享内存、 分块计算、 数据局部性、 矩阵乘法 发表评论

CUDA优化 让向量求和变得非常快

2025年4月9日14时 作者 GiantPandaCV

表到本公众号。
让向量求和变得非常快
06 Apr, 2025
在这篇博客文章中,我们将简要描述如何

分类 学术 标签 CUDA、 cuDNN、 H100 GPU、 动态分区、 卷积、 负载均衡 发表评论

DeepSeek-V3 + SGLang: 推理优化 (v0.4.3.post2+sgl-kernel:0.0.3.post6)

2025年4月9日14时 作者 GiantPandaCV

DeepSeek V3 SGLang 优化
继续我们的DeepSeek V3与SGLang集成的技术

分类 学术 标签 LMSYS、 SGLang、 sglang团队、 优化技术、 协作、 深度学习 发表评论

Llama4凌晨突然发布!以超高性价比开启原生多模态AI和开源MoE的新时代,并公开训练策略!

2025年4月6日14时 作者 GiantPandaCV

Llama 4
系列中的首批模型,这些模型将使人们能够构建更个性化的多模态体验。
Llama 4 S

分类 学术 标签 2万亿参数、 Llama 4、 Meta公司、 图像理解、 多模态性、 强化学习 发表评论

[CUDA基础]CUDA-Learn-Notes: v3.0 大升级-面试刷题不迷路

2025年4月4日14时 作者 GiantPandaCV

2356369
编辑丨GiantPandaLLM
文末有送书福利~
0x00 前言
写在最前面,
新

分类 学术 标签 AIGC驱动工业智能设备、 CUDA-Learn-Notes、 FlashAttention-2 MMA、 HGEMM-MMA、 抽奖活动、 系统设计与行业实践 发表评论

分享一个DeepSeek V3和R1中 Shared Experts和普通Experts融合的一个小技巧

2025年4月3日14时 作者 GiantPandaCV

R1 应用一个fuse shared experts到普通256个expert中的工作 (https

分类 学术 标签 TTFT指标、 共享专家、 内存增加、 复制共享专家、 性能优化、 数值等价修改 发表评论

SGLang 支持Flash Attention V3 Backend

2025年3月26日19时 作者 GiantPandaCV

lgorithm-in-cuda/tree/master/cuda-mode 。主要是LLM和cud

分类 学术 标签 CUDA Graph、 Flash Attention V3、 SGLang、 不同的 forward 实现模式、 初始化 Meta 信息、 实际的 CUDA Graph 捕获和重放 发表评论

从零开始设计 SGLang 的 KV Cache

2025年3月23日14时 作者 GiantPandaCV

8350
1 前言
Attention的计算过程中,需要之前的k和v。
但每次计算的时候,把之前的k

分类 学术 标签 Cache 管理、 一级缓存、 二级缓存 (Radix Cache)、 前缀树结构、 引用计数、 模型执行阶段 发表评论
较早文章
较新文章
← 上一页 页面1 … 页面6 页面7 页面8 … 页面11 下一页 →

AGI AI AI技术 Anthropic ChatGPT Claude Cursor DeepSeek DeepSeek-R1 GitHub GPT-4o LLM Meta OpenAI Python Sam Altman 人工智能 人形机器人 具身智能 大型语言模型 大模型 大语言模型 字节跳动 工业机器人 开源 强化学习 微软 扩散模型 技术创新 智能体 木易 机器学习 深度学习 清华大学 生成式AI 用户体验 百度 腾讯 自然语言处理 英伟达 谷歌 阿里云 阿里巴巴 马斯克 黄仁勋

分类

  • 分享
  • 国际
  • 大模型
  • 学术
  • 开源
  • 机器人
  • 资讯
  • Cursor 中最受欢迎的 5 个 MCP Server!
  • 从GPT-5到DeepSeek V3.1,顶尖AI大模型的新方向出现了!
  • “AI购物代理”——电商下一个必争之地
  • 无账号&特殊网络,如何畅跑 Claude Code|附智谱「特别折扣」
  • 文档多模态RAG方案哪个更好?9类Embedding+3类MLLM+4类框架对比及古籍文档数据合成工具

2025 年 10 月
一 二 三 四 五 六 日
 12345
6789101112
13141516171819
20212223242526
2728293031  
« 9 月    

归档

  • 2025 年 9 月
  • 2025 年 8 月
  • 2025 年 7 月
  • 2025 年 6 月
  • 2025 年 5 月
  • 2025 年 4 月
  • 2025 年 3 月
  • 2025 年 2 月
  • 2025 年 1 月
  • 2024 年 12 月
  • 2024 年 11 月

AI新闻 | X平台 | APK反编译 | 京ICP备2024096144号 |
© 2025 每时AI • Built with GeneratePress
 下载我们的APP,AI秒送达!  立即下载
×