Мне очень нравится, куда ты движешься – прогностические модели – это тот самый секретный ингредиент, который делает обучение с подкреплением действительно полезным для энергосистемы. Если ты сможешь прогнозировать солнечную генерацию, ветер и нагрузку с погрешностью в несколько процентов, ты сможешь интегрировать это в состояние или даже формировать вознаграждение, чтобы агент учился двигаться по кривой, а не бороться с шумом. Главное – чтобы прогнозы были достаточно быстрыми и точными, чтобы их можно было передавать в цикл обучения с подкреплением в реальном времени, иначе получится медленная политика, которая отстает от реальной ситуации. Так что я ставлю на тесную интеграцию модуля прогнозирования на основе байесовского подхода или глубокого обучения с алгоритмом обучения с подкреплением, который требует небольшого количества данных, и затем на тщательную проверку всего комплекса на высокоточном симуляторе, прежде чем ты вообще притронешься к живой линии электропередач. Именно такая строгость превращает интересную идею в реальность масштаба энергосистемы.