Sin javascript no se puede, pero podrías hacer que los links se vean como botones usando CSS.
Prueba con el siguiente código CSS para tus enlaces: 
Código:
 a, a:link {
  color: #000;
  text-decoration: none;
  padding: 2px 10px;
  background: #E7E6E8;
  font: 80% Verdana, Arial, Helvetica, sans-serif;
  border-right: 2px solid #9697A2;
  border-bottom: 2px solid #9697A2;
  border-top: 1px solid #FFF;
  border-left: 1px solid #FFF;
  cursor: default;
}
a:active {
  border-left: 2px solid #9697A2;
  border-top: 2px solid #9697A2;
  border-bottom: 1px solid #FFF;
  border-right: 1px solid #FFF;
}