No tak třeba já vidím problém toho, že na tak výkonnou grafiku máš už relativně starý/pomalý procesor. Pro GTX980 a výše je vhodnější spíše "profi" soket 2011. Samozřejmě záleží taky na konkrétní hře, některé akcentují CPU, jiné GPU.
To se dá vše zjistit odpovídajícími nástroji, které ti řeknou, kde máš bottleneck.