data-augmentation

TokenRobustness

Language Models are not Equally Robust to Non-Canonical Tokenization across Languages

同文不同合法切分会造成语言与任务相关的性能退化；英语分桶多切分训练提高跨语言 ARC 准确率，但未消除相对分词差距。