The first problem is corrected by allowing the procedure to change the policy (at some or all states) before the values settle.
Перша проблема легко виправляється, якщо дозволити процедурі змінювати стратегію (взагалі, або на деяких станах) до встановлення цінностей.