Advertisement

Bewertete Markovprozesse: Ein neuer Lösungsalgorithmus

  • K. Spremann
Conference paper
Part of the Proceedings in Operations Research book series (ORP, volume 1973)

Summary

Starting with a model for general problems of optimal control, a maximumprinciple can be derived by partial deviation of objective functional and process in direction of state variables.

Application of model and method to ergodic Marcovprocesses with rewards results in Howard’s method of policy iteration and a new, more effective algorithm.

Preview

Unable to display preview. Download preview PDF.

Unable to display preview. Download preview PDF.

Literatur

  1. [1]
    BROWN, A.L./PAGE, A.: Elements of Functional Analysis. Van Nostrand Compo London, 1970Google Scholar
  2. [2]
    CANON, M.D./COLLUM Jr., C.D./POLAK, E.: Theory of Optimal Control and Mathematical Programming. Mc Graw-Hill Series in Systems Science, New York 1970Google Scholar
  3. [3]
    DIEUDONNE, J.: Foundations of Modern Analysis; Pure and Applied Mathematics, vol. 10, Academic Press, New York 1960Google Scholar
  4. [4]
    HOWARD, R.A.: Dynamic Programming and Marcov Processes; 2nd ed., pp. 32–43; Cambridge, Massachusetts, MIT Press, 1962Google Scholar
  5. [5]
    KUSHNER, H.: Introduction to stochastic Controli Holt, Rinehart and Watson, Inc., New York 1971Google Scholar
  6. [6]
    LAURENT, P.J.: Approximation et optimisation. Collection Enseignement des sciences, 13; Hermann, Paris 1972Google Scholar
  7. [7]
    LUENBERGER, D.G.: Optimization by Vector Space Methods. Wiley & Sons, New York 1969Google Scholar
  8. [8]
    SPREMANN, K.: Beweisprinzipien für Optimalitätsbedingungen bei zeitabhängigen Prozessen. Diss. TU München 1972Google Scholar
  9. [9]
    SPREMANN, K.: Optimierung verschiedener Steuerungsprobleme mit einem funktionalanalytischen Maximumprinzip. Vortrag auf der 1. Diskussionstagung des ADOW in Rheda im Mai 1973; ersch. in ZAMMGoogle Scholar
  10. [10]
    SPREMANN, K.: Ein funktionalanalytischer Beweis des Maximumprinzips von Pontrjagin und des sen Verwendung zur Herleitung der Politikiteration von Howard.COMPUTING, 9 (1972)Google Scholar
  11. [11]
    SPREMANN, K.: Eine konstruktive Methode zur Losung von Kontrollproblemen. Discussion Papers des Instituts fur Wirtschaftstheorie und Operations Research, Nr.4; Universitat Karlsruhe 1973Google Scholar
  12. [12]
    SPREMANN, K.: Ein Maximumprinzip fur stochastische Prozesse. Vortrag in Oberwolfach im Juli/August 1973Google Scholar
  13. [13]
    SPREMANN, K./GESSNER, P.: Konstruktive Optimierung dynamischer und stochastischer Prozesse. Mathematical Systems in Economics 81 A.Hain, Meisenheim am Glan 1973Google Scholar

Copyright information

© Physica-Verlag, Rudolf Liebing KG, Würzburg 1974

Authors and Affiliations

  • K. Spremann
    • 1
  1. 1.KarlsruheDeutschland

Personalised recommendations