Summary
Starting with a model for general problems of optimal control, a maximumprinciple can be derived by partial deviation of objective functional and process in direction of state variables.
Application of model and method to ergodic Marcovprocesses with rewards results in Howard’s method of policy iteration and a new, more effective algorithm.
This is a preview of subscription content, log in via an institution to check access.
Access this chapter
Tax calculation will be finalised at checkout
Purchases are for personal use only
Preview
Unable to display preview. Download preview PDF.
Literatur
BROWN, A.L./PAGE, A.: Elements of Functional Analysis. Van Nostrand Compo London, 1970
CANON, M.D./COLLUM Jr., C.D./POLAK, E.: Theory of Optimal Control and Mathematical Programming. Mc Graw-Hill Series in Systems Science, New York 1970
DIEUDONNE, J.: Foundations of Modern Analysis; Pure and Applied Mathematics, vol. 10, Academic Press, New York 1960
HOWARD, R.A.: Dynamic Programming and Marcov Processes; 2nd ed., pp. 32–43; Cambridge, Massachusetts, MIT Press, 1962
KUSHNER, H.: Introduction to stochastic Controli Holt, Rinehart and Watson, Inc., New York 1971
LAURENT, P.J.: Approximation et optimisation. Collection Enseignement des sciences, 13; Hermann, Paris 1972
LUENBERGER, D.G.: Optimization by Vector Space Methods. Wiley & Sons, New York 1969
SPREMANN, K.: Beweisprinzipien für Optimalitätsbedingungen bei zeitabhängigen Prozessen. Diss. TU München 1972
SPREMANN, K.: Optimierung verschiedener Steuerungsprobleme mit einem funktionalanalytischen Maximumprinzip. Vortrag auf der 1. Diskussionstagung des ADOW in Rheda im Mai 1973; ersch. in ZAMM
SPREMANN, K.: Ein funktionalanalytischer Beweis des Maximumprinzips von Pontrjagin und des sen Verwendung zur Herleitung der Politikiteration von Howard.COMPUTING, 9 (1972)
SPREMANN, K.: Eine konstruktive Methode zur Losung von Kontrollproblemen. Discussion Papers des Instituts fur Wirtschaftstheorie und Operations Research, Nr.4; Universitat Karlsruhe 1973
SPREMANN, K.: Ein Maximumprinzip fur stochastische Prozesse. Vortrag in Oberwolfach im Juli/August 1973
SPREMANN, K./GESSNER, P.: Konstruktive Optimierung dynamischer und stochastischer Prozesse. Mathematical Systems in Economics 81 A.Hain, Meisenheim am Glan 1973
Author information
Authors and Affiliations
Editor information
Rights and permissions
Copyright information
© 1974 Physica-Verlag, Rudolf Liebing KG, Würzburg
About this paper
Cite this paper
Spremann, K. (1974). Bewertete Markovprozesse: Ein neuer Lösungsalgorithmus. In: Gessner, P., Henn, R., Steinecke, V., Todt, H. (eds) DGOR Papers of the Annual Meeting 1973 / Vorträge der Jahrestagung 1973. Proceedings in Operations Research, vol 1973. Physica-Verlag HD. https://doi.org/10.1007/978-3-642-99747-1_37
Download citation
DOI: https://doi.org/10.1007/978-3-642-99747-1_37
Publisher Name: Physica-Verlag HD
Print ISBN: 978-3-7908-0138-5
Online ISBN: 978-3-642-99747-1
eBook Packages: Springer Book Archive