AI用語集
人工知能の完全辞典
制約付きベイズ最適化
ベイズ推論とハイパーパラメータの明示的制約を組み合わせた最適化手法。ガウス過程を使用して目的関数をモデル化しながら、課された境界と制限を尊重します。
階層的グリッド探索
ハイパーパラメータ間の依存関係を階層ツリー構造で整理して探索を構造化する最適化アプローチ。無効な組み合わせを排除し、探索空間を最適化します。
パレート多目的最適化
複数の矛盾する目的をハイパーパラメータ制約下で同時に最適化する必要がある場合に、パレート最適解のセットを特定する高度な技術。パフォーマンスとリソースの間のバランスの取れた妥協点を可能にします。
制約付き遺伝的アルゴリズム
ペナルティ、修復、制約支配などのメカニズムによって最適化制約を処理するように適応された進化的メタヒューリスティクス。探索空間の制限を尊重しながら遺伝的多様性を維持します。
有界粒子群最適化
粒子が明示的制約によって境界付けられた探索空間で進化するPSOアルゴリズムの変種。反射または再初期化メカニズムを使用して解を実行可能領域内に維持します。
射影勾配法
勾配をアクティブ制約の接線空間に射影する最適化技術。各反復が実行可能領域内に留まることを保証しながら、最も急な降下方向に従います。
制約付き焼きなまし法最適化
新しい解の受け入れプロセスに制約管理メカニズムを統合するメタヒューリスティックアルゴリズム。適応的ペナルティによる目的関数の修正または修復演算子の使用。
制約付き逐次モデルベース最適化
ハイパーパラメータ制約を処理するために拡張されたSequential Model-Based Optimization。目的と制約に対して同時に確率モデルを構築し、実行可能な解への検索を効率的に導きます。
制約付き進化差分最適化
制約付き問題に適応した連続最適化アルゴリズム。特定の突然変異と交叉オペレーターを使用し、実行可能性と制約支配に基づいた選択手法と組み合わせています。
内部点法
制約をバリアペナルティに変換する最適化アルゴリズム。実行可能領域の内部を探索し、すべてのアクティブ制約を厳密に維持しながら最適解に収束します。
拡張ラグランジュ最適化
ラグランジュ双対性と二次罰則項を組み合わせる方法。制約付き問題を一連の非制約問題に変換し、実行可能な最適解への収束を保証します。
依存関係付きTPE
ハイパーパラメータ間の条件付き依存関係を処理するように修正されたTree-structured Parzen Estimator。探索空間の条件付き構造を尊重する階層的確率モデルを構築します。
ハイパーパラメータの堅牢最適化
様々な条件と不確実性の下で優れた性能を示すハイパーパラメータ構成を探索するアプローチ。入力データの変化に対するモデルの安定性を保証するために堅牢性制約を統合します。
制約付き多忠実度最適化
予算制約下で異なる忠実度の評価を使用する戦略。高速な近似と精密な評価の間でリソースをインテリジェントに割り当て、最適ハイパーパラメータへの収束を加速します。
リソース制約付きハイパーパラメータ最適化
計算、メモリ、時間の制限を明示的に検索プロセスに統合する最適化フレームワーク。早期停止と適応的リソース割り当てのメカニズムを使用します。
制約付き期待改善
ベイズ最適化のための獲得基準。制約に違反する解を罰則するために標準的な期待改善を修正し、新しい領域の探索と課された制約の尊重のバランスを取ります。
カテゴリカル制約付き最適化
相互制約や除外を持つカテゴリカルハイパーパラメータを処理するための専門的な方法。適応型エンコーディングと離散空間の構造を尊重する検索演算子を使用します。
制約付きニューラルアーキテクチャ検索
複雑さ、レイテンシ、またはエネルギー消費に関する制約を統合したニューラルアーキテクチャ設計の自動化プロセス。生成されたアーキテクチャがハードウェアおよび運用仕様を遵守することを保証します。