Qué tal,
como te han comentado, y que yo sepa, no se pueden poner distintos colores.
Aparte de eso, si lo que quieres es que aparezcan descripciones de texto sobre areas de un mapa de imagen lo adecuado es que, además del atributo alt pongas también el title con el mismo valor.
la misión de title es la de mostrar la descripción de un elemento. La de alt es mostrar un texto alternativo en el caso de que la imagen no se cargue, bien porque no se encuentra el archivo, bien porque se está navegando sin imágenes (desactivadas del navegador) y además (y especialmente) sirve para la que los ordenadores que usen la accesabilidad para discapacitados visuales puedan leer la descripción de la imagen desde el atributo alt.
Si usas sólo alt, será correcto, pero te advierto que sólo los usuarios de explorer verán esa descripción. El alt sólo debe mostrarse cuando la imagen no carga. Explorer lo muestra porque es así de chulo, pero no así el resto de navegadores.
En cambio si además usas title obtendrás el resultado que buscas en todos los navegadores