C'est surement un problème du coté de l'ATtiny alors.
Il est neuf sortie d'usine ou il a déja servit ?
Vérifie aussi tes connexions (pas de croisement MISO / MOSI par exemple).
Vérifie aussi que tu as bien une résistance de 10K entre +VCC et RESET de l'ATtiny.