lesto:
In primis con una mascera escludi i colori che non ti servono, o meglio che differiscono troppo dal colore che stai cercando, cosa che credo tu faccia di già.
Prova a "giocare" sul serio con la visione artificiale così ti rendi conto da solo che le cose non sono così semplici come le stai descrivendo, sopratutto quando si lavora su uno sfondo generico.