No vida ... :/
RemoveAt mě vůbec nenapdalo použít.
Pokud za ty čísla přidám nějaký string (nebo cokoliv) - už mi to funguje a odstraní to celý řádek na zadanym indexu. :)
(Nefungovalo -> program chybu nehlásil ... prostě šlapal, zadal jsem mu přes Console.Readline() to ID - program doběhl do konce ale když sme si list opět na konci vypsal, prvek tam stále byl.)