从 BERT、GPT 到 Jev：一文看懂大模型架构的演进与分化

从 BERT 、 GPT 到 Jev：一文看懂大模型架构的演进与分化

摘要

Transformer架构催生了三条技术路线。Jev模型是LLM理解能力与分类器输出形式的结合，它不逐token生成，而是并行返回问题概率，校准性更好。Laya则用4亿参数的双向encoder实现了类似输出，但理解能力有限。决策任务需根据是自由生成还是有限判断来选模型。