汀的知识碎片

Tag: RoPE

2 items with this tag.

  • Mar 04, 2026

    GPT 架构——Decoder-Only 的自回归语言模型

    • LLM
    • GPT
    • Decoder-Only
    • 自回归
    • Tokenizer
    • BPE
    • RoPE
    • Embedding
    • Causal-Mask
  • Mar 04, 2026

    长上下文与多模态——技术前沿

    • LLM
    • 长上下文
    • 多模态
    • RoPE
    • Flash-Attention
    • 稀疏注意力
    • Vision-Transformer
    • CLIP
    • 技术前沿

Created with Quartz v4.5.2 © 2026

  • GitHub
  • Discord Community