state space
状態空間
名詞
複数形: state spaces
state spaceは、数学、物理学、制御理論、そして現代の人工知能(AI)分野において不可欠な概念です。基本的には、あるシステムが取り得るすべての可能な状態を網羅した集合を指します。例えば、チェスのゲームにおけるstate spaceは、盤上の駒の配置として考えられるすべての組み合わせになります。
数学的モデルと強化学習における役割
制御理論などの数学的モデルでは、システムの挙動を記述するための多次元的な空間として定義されます。一方で、強化学習の文脈では、エージェントが意思決定を行うための環境の全状況を指します。エージェントはこのstate spaceの中で現在の位置を把握し、どの行動を取るべきかを判断します。状態空間が膨大になる(次元の呪いと呼ばれる現象)と、計算コストが急増するため、実際にはこれを効率的に近似する手法が重要視されます。
概念的な区別と注意点
似た概念にaction space(行動空間)がありますが、これらは明確に区別されます。state spaceが今どのような状況にあるかという静的な状態の集合であるのに対し、action spaceはどのような操作が可能かという動的な選択肢の集合を指します。システムを解析する際は、まずstate spaceを正しく定義し、その空間内で状態がどのように遷移するかをモデル化することが基本となります。
意味
関連語
phase spacedimensionvectorcoordinatevariableparametertrajectoryequilibriumstabilitydynamicssystemmodelstatetransitionmappingmanifoldtopologygeometrymatrixoperatoreigenvalueeigenvectorattractorbifurcationchaosentropyenergymomentumpositionvelocityaccelerationphaseorbitflowgradientdivergenceintegralderivativedifferentialequationalgorithmsearchheuristicnodeedgegraphautomatonMarkov chainprobabilitystochasticdeterministicoptimizationconstraintboundarydomainrangeprojectiontransformationsymmetryinvariantfeedbackcontrolinputoutputsignalfilterobserversimulationcomplexityconvergencesingularitytensorscalarvector space