No es ALT sino TITLE y lo hacés así (por ejemplo con una imagen)
Código:
<img src="/images/imagen1.jpg" alt="una descripción de la imagen que se desplegará como texto si la misma no se puede mostrar por el motivo que sea" title="acá va el texto de tool-tip amarillito que decís" width="X" height="Y" />