Pues fácil, en la celda pones:
<table>
<tr>
<td onmouseover="this.style.backgroundColor='blue';thi s.style.cursor='hand'" onmouseout="this.style.backgroundColor='red';"this .style.cursor='default'">Blablabla</td></tr></table>
En CSS seria poniendo un css dentro de cada onmouse y definirlo arriba