未分类
Revisiting Pipeline Parallelism for LLM Serving
研究问题
相比TP,PP明显拥有更低的通信量,甚至可以使用PCIE进行通信,为什么最终的吞吐率以及性能,比不上TP?
发现PP的情况下,流水线气泡问题大大降低了PP的通信优势。
本工…
阅读全文 ↗
未分类
另外,improves upon 是学术论文中常见的表达,意思是“相比……有所改进”或“优于……”。
阅读全文 ↗
未分类
工作就是重复劳动,就是利用已有知识去解决问题,什么东西都学不到,无法拓宽自身任何知识面,除了赚钱没有任何作用。
也可能是因为我连续找的两个都是垃圾工作。
阅读全文 ↗
未分类
炒肉片记录
吃的最爽的一次,油够盐够啥都有,味道回到了熟悉的味道。
原材料
肉片
蒜片
油
盐
十三香
酱油
做法记录
生瘦肉片加入油(重要)、酱油(重要)、胡椒粉、十三香(重要),搅拌
蒜片下油锅进行爆。此时加入适量盐。
蒜到黄色左右的时候下入搅拌好的肉片,分批…
阅读全文 ↗
未分类
相量法简介
纯电阻电路上加直流电压,有
$$
R=\dfrac{U}{I}
$$
而线性电路上加正弦激励和上面的情况会有类似之处。这也是为什么该电路会叫作线性电路,而R、L、C会叫作线性元件(理想电容是线性电容)。
理想电路上的电阻和储能元件电容电感
$$
\dot{Z}(\o…
阅读全文 ↗