Probaste con un Group by? Algo asi:
SELECT ComentarioID, SUM(Voto) as VotosTotales FROM tabla GROUP BY ComentarioID ORDER BY VotosTotales DESC;
+info:
http://sql.1keydata.com/es/sql-group-by.php
Sin saber lo que hiciste vamos a ir disparando a ciegas hasta que encontremos la respuesta que buscas.
