使用您自己的预训练模型进行下游分割

我想问你一个问题,我按照官方的预训练代码对医学图像数据集(6k)进行了预训练,然后下游任务是分割,但使用自有的预训练模型进行微调的结果总是比作者使用imagenet的预训练模型差,这是为什么呢,我的预训练数据是否还太少?