Kód dělá, co má, ale myší lze v závislosti rychlosti pohybu a citlivosti posunout o značný kus, než se vrátí zpátky.
Jelikož jsem to potřeboval pouze dočasně, proto je daleko lepší snížit citlivost myši. Proto jsem to udělal takhle - 2747892-java-native-access-reduce-speed-mouse
I tak ale díky za radu.
PS. Program tím však ztratí univerzálnost.