论文部分内容阅读
不同于传统的基于性能为指标的机器学习方法，基于互信息准则的学习方法显示出了独到的优越性。但是，如何理解互信息概念在分类问题中的具体内涵与应用特点仍然是不明确的。本文给出了该问题研究的基本理论公式与方法示意图。并结合我们近期的研究工作，推导了互信息在极值情况下与分类性能关系的相关定理，以及二值分类情况下的误差敏感度分析方程。文中给出若干简单实例，探讨了互信息概念在分类问题应用中的基本解释与应用特点。