Diferente do que o nosso colega afirmou, Branco É uma cor, e é possível sim resolver o seu problema com poucos cliques! 🙂
É só você: Com o seu desenho devidamente aberto no Photoshop, Nas opções superiores, selecione: [ SELECIONAR ] (ou se o seu estiver em inglês: [Select] )
Depois na opção: [Intervalo de cores...] (se estiver em inglês: [Color range] )
Aberto a janela, é só clicar na opção: "Selecionar" e escolher a opção me melhor se adequar, no meu caso foi o: "sombras" depois da um "OK" e pronto, a cor desejada estará TODA selecionada automaticamente pelo photoshop
Caso quira ainda inverter a seleção, use o atalho: "Ctrl + Shift + i" e prontinho,
tendo a cor indesejada selecionada é só apertar o "Delete" e sucesso!
Espero ter ajudado, vi que a dúvida foi postada em 2015, e cheguei meio atrasado, mas cheguei nele com exatamente essa mesma dúvida, e como ainda não tinha uma resposta 100% continuei pesquisando e tentando descobrir, agora que consegui compartilho aqui para quem mais por ventura chegar até esse fórum com a mesma dúvida
Abraço.