http://www.deeplearningbook.org/contents/ml.html La page 116 explique l'erreur bayes comme ci-dessous
Le modèle idéal est un oracle qui connaît simplement la vraie distribution de probabilité qui génère les données. Même un tel modèle entraînera toujours une erreur sur de nombreux problèmes, car il peut y avoir encore du bruit dans la distribution. Dans le cas d'un apprentissage supervisé, le mappage de x à y peut être intrinsèquement stochastique, ou y peut être une fonction déterministe qui implique d'autres variables en plus de celles incluses dans x. L'erreur encourue par un oracle faisant des prédictions à partir de la vraie distribution p (x, y) est appelée l'erreur de Bayes.
Des questions
- Veuillez expliquer l'erreur Bayes de manière intuitive?
- En quoi est-ce différent de l'erreur irréductible?
- Puis-je dire erreur totale = biais + variance + erreur Bayes?
- Que signifie "y peut être intrinsèquement stochastique"?
la source