Factor de Descuento (Discount Factor) concepto en Finanzas, Economía y Aprendizaje por Refuerzo
Se trata de un valor numérico entre 0 y 1
Se utiliza para ponderar el valor presente.
De una cantidad futura.
Aplicaciones del Factor de Descuento
En Finanzas y Economía
El factor de descuento es para calcular.
El Valor Presente Neto (VPN)
Otros modelos de valoración de inversiones.
Este factor se usa para descontar los flujos.
De efectivo futuros.
Determina su valor presente.
A medida que t aumenta DF disminuye.
Reflejando la menor importancia.
De los flujos lejanos en el tiempo.
En Aprendizaje por Refuerzo (Reinforcement Learning, RL)
El factor de descuento γ (gamma) en la función de recompensa.
Determina cuánto valora un agente.
Las recompensas futuras.
En comparación con las inmediatas.
Impacto de γ
Si γ = 0
El agente solo considera recompensas inmediatas.
Si γ es cercano a 1
El agente tiene una visión más a largo plazo.
Valora más las recompensas futuras.
Ejemplo
En juegos o navegación autónoma.
Un γ alto ayuda al agente a planificar estratégicamente.
En lugar de tomar decisiones impulsivas.
El factor de descuento equilibra la recompensa inmediata.
Impactando el comportamiento.
De los algoritmos de aprendizaje por refuerzo.
