Baade 解释论文为何弃用 encoder 改称 tokenizer encoder

BaadeAlan · x · 2026-10-21

在这场术语讨论中,研究者 Alan Baade 回应 giffmana 等人:并非执着于「tokenizer」一词,而是「encoder」语义过于超载——Encoder/Decoder Transformer 中的 encoder 与 MAE/MAR 中的 encoder 并不相同,后者的输出不必可建模或可预测;为了明确指明模型生成所在的空间,论文采用「tokenizer encoder」的表述。

所属事件:研究者论战 tokenizer 术语:encoder 还是 tokenizer(3 条相关)→

原文链接 →