Ano, půjde to. Každopádně tě musím pochválit, protože jsi jeden z mála, kteří to chtějí propojit kabelem a nevymýšlí kraviny.
Nevíme, jaký máš notebook, ale myslím, že tam bude 1Gb síťovka. Těch 100Mb se ti nastavilo automaticky, protože tě omezuje ten původní router.
Schválně mrkni do vlastností a konfigurace té síťovky na rychlost. Nejspíš to máš nastavené na AUTO. Taky to můžeš zkontrolovat u stolního PC. Když ten router vyměníš, tak by se to mělo přehodit na 1Gbit, případně to jde nastavit ručně.