Начинает тормозить мышь при клике. PYTHON, библиотека PYNPUT

Необходимо смещать мышь на заранее предопределенные координаты при ее перемещении (по сути убрать возможность передвижения мыши). В документации по этому вопросу ничего не нашел. Думал что просто пк не может обработать столько событий, но если вместо смещения будем выводить текст, все ок.

from pynput.mouse import Button, Controller
from pynput import mouse
import time

# Координаты

staticX = 100;
staticY = 100;

def on_move(x,y):
    global staticX;
    global staticY;
    # Задержка перед смещением --> 1 сек просто для теста

    time.sleep(1);

    # Смещение
    Controller().position = (staticX, staticY);

# Начинаем прослушивать событие клика

listener = mouse.Listener(on_move=on_move);
listener.start();

# Чтобы cmd не закрылась

input();