Pues no es necesario un unlink de las mayores de 34. Simplemente empieza tu for con la que le corresponde ser la 34. Por ejemplo, si metes 2 nuevas, la que quieres que pase a ser la 34 es la 32, asi que podrias empezar el for en 32. Seria algo asi:
Código PHP:
$comienzo=34-$deldia_principio;
for($i=$comienzo; $i>=0; $i=$i-1)
{
$i2=$i+$deldia_principio;
$final=(rename ('destino/'.$i.'.jpg','destino/'.$i2.'.jpg'));
}
Supongo que $deldia_principio es el numero de imagenes nuevas.
De esta forma (creo, pues no lo he probado) nunca crearas imagenes 35, 36, ... y no tendras que borrarlas.
Saludos.