Uděláš si jeden DIV jako "obal" stránky, tomu nastavíš pevnou šířku 800px (doporučuji méně, cca 770px) a okraje margin levý+pravý nastav na auto, horní+dolní dle potřeby. Tím se celá stránka vycentruje.

Do této obálky pak už umístíš ostatní DIVy, kterým nastavíš patřičnou šířku a zarovnání (float: left/right).