Procesos de control de Markov parcialmente observables con aplicaciones a sistemas de inventarios

Abstract

En esta tesis estudiamos dos tipos de modelos. En el primero suponemos que el controlador o el operador del inventario sólo observa cuando el nivel de inventario es cero, al cual se le conoce como Zero Balance Walk. En el otro modelo supondremos que el operador del inventario observa sólo las ventas, y por lo tanto la demanda es parcialmente observada. En ambos casos aplicaremos la transformación a un PCM-CO y obtendremos explícitamente la dinámica del nuevo sistema, para después mostrar la existencia de políticas óptimas bajo el criterio de costo descontado. La tesis está estructurada de la siguiente manera. En el Capítulo 1 se presenta la teoría básica de los PCMs así como resultados en el caso CO. Enseguida, en el Capítulo 2, se formula de forma general el PCO para procesos de control PO, y finalmente, en el Capítulo 3, se presentan las aplicaciones a los sistemas de inventario. Adicionalmente incluimos un Apéndice que contiene resultados que estaremos haciendo referencia durante el desarrollo del trabajo, así como una tabla de notaciones para facilitar la lectura.