Énoncez le problème théorique de l'alignement en intelligence artificielle générale. Analysez pourquoi l'optimisation d'un objectif mal défini peut conduire à des conséquences catastrophiques (le problème du 'paperclip maximizer'). Discutez des approches théoriques comme l'apprentissage par imitation et l'apprentissage inverse des préférences pour tenter de résoudre ce problème.