中文

最优无共谋教学

机器学习 2019-03-12 v1 机器学习

摘要

从教师处学习的形式化模型需要遵循某些准则以避免共谋。最被广泛接受的共谋自由概念由 Goldman 和 Mathias(1996)提出,并且已研究了多种遵循其准则的教学模型。对于每个模型 MM 和每个概念类 C\mathcal{C},参数 MM-TD(C)\mathrm{TD}(\mathcal{C}) 指的是概念类 C\mathcal{C} 在模型 MM 中的教学维度——定义为在 C\mathcal{C} 中所有概念的最坏情况下,教授一个概念所需的示例数量。本文引入了一种新的教学模型,称为无冲突教学(no-clash teaching),以及相应的参数 NCTD(C)\mathrm{NCTD}(\mathcal{C})。无冲突教学被证明在强意义下是最优的:给定任意概念类 C\mathcal{C} 和任意遵循 Goldman 与 Mathias 共谋自由准则的模型 MM,均有 NCTD(C)M\mathrm{NCTD}(\mathcal{C})\le M-TD(C)\mathrm{TD}(\mathcal{C})。我们还研究了仅从正例学习的相应概念 NCTD+\mathrm{NCTD}^+,建立了关于 NCTD\mathrm{NCTD}NCTD+\mathrm{NCTD}^+ 的有用界,并讨论了这些参数与 VC 维以及样本压缩的关系。除了构建最优的无共谋教学模型外,我们的主要结果涉及判定对于给定的 C\mathcal{C}kk 是否有 NCTD+(C)=k\mathrm{NCTD}^+(\mathcal{C})=k(或 NCTD(C)=k\mathrm{NCTD}(\mathcal{C})=k)的计算复杂性。我们证明了某些此类判定问题等价于二部图中特定约束匹配的存在性问题。我们针对后者给出的 NP 困难结果在约束图匹配研究中具有独立意义。

关键词

引用

@article{arxiv.1903.04012,
  title  = {Optimal Collusion-Free Teaching},
  author = {David Kirkpatrick and Hans U. Simon and Sandra Zilles},
  journal= {arXiv preprint arXiv:1903.04012},
  year   = {2019}
}

备注

26 pages and 6 figures. This is an expanded version of a similarly titled paper to appear in Proceedings of Machine Learning Research (ALT 2019), vol. 98, 2019