为什么不在 init 句中添加 Transformer 令牌?
作者: Zessay创建于 2021年12月13日更新于 2022年1月15日
标签Contributions welcomequestion
昨天我遇到了一个问题,我想获取 `transformer_tags` 词汇空间的 `vocab_size`,这个词汇空间是在 `PretrainedTransformerIndexer` 中指定的。当我想在 `Model` 的初始化语句中使用这个词汇空间时,我发现它没有定义。为了解决这个问题,我阅读了源代码的这部分。我发现了 `_add_encoding_to_vocabulary_if_needed` 方法,它在 `tokens_to_indices` 中被调用,在 `_train_epoch` 启动时被调用。
内容来源: allenai/allennlp