自研大模型，你得先过哪些技术关

作者按问题定义、数据与语料、Tokenizer、模型架构、预训练、系统性能、评测、后训练与对齐、安全合规、推理产品化十个环节，摊开自研大模型的技术门槛与对应技术栈。作者本人在用一张消费级显卡打通约 0.3B 参数小模型的预训练链路，核心建议是先跑通可中断、可续训、可复现的最小闭环，再扩数据扩参数；训练主链以 Python + PyTorch 为主，CUDA 与多机并行可后补。