本文分类：news发布日期：2025/11/17 22:43:37
相关文章
深入解析：使用 Triton 实现 Flash Attention2 - 让大模型训练飞起来
引言
你是否曾经在训练大型语言模型时，眼睁睁地看着 GPU 内存不断飙升，最终因为 OOM（Out of Memory）错误而前功尽弃？或者在处理长序列时，发现注意力机制的计算时间呈平方级增长，让人望而却步？
如果你有过这样的…
建站知识
2025/11/17 22:39:06
Day22flex布局
1.felx的组成<!DOCTYPE html>
<html lang="en">
<head><meta charset="UTF-8"><meta name="viewport" content="width=device-width, initial-scale=1…
建站知识
2025/11/17 22:34:50
re.compile为什么能提高速度？
re.compile(pattern, flags=0) 的核心作用是 “编译正则表达式模式，生成可重复使用的 Pattern 对象”——本质是把正则字符串“编译”成正则引擎可直接执行的“字节码”，核心价值是 提升重复使用时的效率 + 简化代码…
建站知识
2025/11/17 22:34:30
从 0 搭建 LLM 不再难！这个 PyTorch 项目帮你吃透大模型底层逻辑
如果你曾想深入理解大语言模型（LLM）的 “五脏六腑”，却被框架封装的黑盒接口、复杂的源码结构劝退；如果你希望亲手实现 Transformer 的每一个组件，而非单纯调用transformers库 —— 那么今天推荐的这个开源项目，…
建站知识
2025/11/17 22:33:44
题解：P8819 [CSP-S 2022] 星战
CSP-S 2022 T3 和哈希 trick你说的对，但是，
“不可以，总司令！”
这是一个神秘 trick，它的模板题是 P3560，可以先把这个题写了或者先把星战写了再写模板。
题意简述
题目链接
给出 \(n\) 个点 \(m\) 条边的有向图…
建站知识
2025/11/17 22:33:30
instr在mysql索引中作用是什么
在MySQL中，instr函数并不是直接用于创建或管理索引的。然而，instr函数可以用于查询字符串中的子串位置，这在某些情况下可能与索引的使用相关。instr函数用于返回子字符串在字符串中第一次出现的位置。如果子字符串不…
建站知识
2025/11/17 22:32:56
