避免管道重建带来的高昂成本

目前,SMAC建议的超参数配置不依赖于数据集的大小。例如,指定在零到一之间的超参数`classifier:max_features`会根据`max_features = int(n_features ** classifier:max_features)`进行转换。假设所涉及的数据集仅包含 10 个特征,SMAC 并不知道调优的超参数大多数值对应于实际模型中应用的同一超参数。因此,需要在转换后跟踪'实际'的超参数,并检查它们是否被重复使用,如果是,则向 SMAC 返回缓存的函数值。初始实验表明,总运行次数的 1-2% 实际上是重新优化。