Trochu jsem to poupravil, funguje ve Firefoxu, Chrome i Internet Exploreru.
V ostatních jsem to nezkoušel, ale asi to pojede všude. Alt je něco jiného, ty chceš asi title.

<img alt="" height="80"  width="100" src="image.jpg"  onmouseout="this.src = 'image.jpg'" onmouseover="this.src = 'image2.jpg'; title='titulek nad hover obrázkem'" />