Pyautogui в selenoid

Пост дьяволы сеньоры, у меня встал такой вопрос. Когда я работал с Selenium у меня без препятствий получилось связать Pyautogui с браузером для выполнения каких либо действий. Здесь была работа с локальным курсором и все вроде бы понятно, но когда я пришел к такой вещи как Selenoid (который поднимает сессии в контейнерах) встал вопрос как я могу это реализовать там, ведь моих навыков не хватает, чтобы додуматься как мне это можно реализовать и можно ли вообще. Я начал опираться на логику, что доступ к сессии я могу получить через VNC, соответственно у него есть графическое окружение. Было бы здорово если вы смогли бы мне подкинуть парочку идей как мне этого достичь.