信息增益常用于指标的选取，即选择有影响的指标。公式所示的含义是：用指标数值的分散程度来计算不确定性，不确定性高，信息含量多。至于，为何采用这个公式，没有固定，你自已也可设定一些公式，原则是能反映信息的多寡。所例公式，无非是概率+全概率。

形象的比喻是：一个三岁的小孩与一个50岁的小孩说自已是父亲，都是没有太多信息，前者肯定不是，后者基本上是。

仅供参考，具体可看些这方面的书（人工智能，信息科学）

好，多谢了。