机器学习之奥卡姆剃刀定律
奥卡姆剃刀定律（Occam’s Razor）是一种哲学原则，用于选择理论或解决问题时的指导规则。其核心思想是：在所有可能的解释中，最简单的解释往往是最优的。用通俗的话说就是：
“如无必要，勿增实体。”
奥卡姆剃刀的来源
- 历史背景：
奥卡姆剃刀由14世纪英国哲学家和神学家威廉·奥卡姆（William of Ockham）提出。尽管这一原则的基本思想在他之前已有，但他的表达最为简洁直接，因此被命名为“奥卡姆剃刀”。 - “剃刀”隐喻：
这个“剃刀”隐喻是指剃掉不必要的假设或复杂性，保留最简单、最有力的解释。
核心含义
奥卡姆剃刀的基本精神是偏向于简洁性，认为：
- 如果两个理论能够解释同样的现象，那么更简单的理论更可能是正确的。
- 在没有足够证据支持复杂解释之前，避免引入多余的假设。