időbeli különbség

Rövid szöveges bemutatás: 
Az időbeli különbség egy hasznosság átmenet meghatározó egyenletrendszer. A nevét onnan kapta, hogy az egyenlet eredménye csakis az aktuális és a tényleges következő állapot hasznosságától függ. Mivel nem vesz figyelembe minden lehetséges következő állapotot, ezért olyan pontos eredményt sem tud adni. Az egyenlet mégis azért maradt fenn, mert a ritka állapot átmenetek ritkán következnek be, így a szolgáltatott értékek átlaga mégis közelítőleg pontos marad. Előnye, hogy kevesebb számítást igényel és a végrehajtónak nincs szüksége állapot átmenet modellre hiszen mindig csak a tényleges következő állapotot veszi figyelembe.