Avant même de parler de "priver de quelque-chose", il s'agit déjà d'une différence de considération, de regard, et donc de façon de concevoir l'autre.
Et s'il s'agit d'une différence basée sur une caractéristique qui ne justifie pas cette différence de traitement, alors en effet, c'est injuste par essence. (et c'est presque toujours le cas)
Ceci dit c'est généralement l'expression de la peur de ce qui n'est pas comprit, ou pas accepté, ou de ce qui est imaginé comme une menace, notamment de perdre quelque-chose, comme un statu.
D'une certaine façon une personne discriminante est elle aussi victime, de choses diverses (ou d'absence de choses surtout, dans son éducation notamment, et son expérience de vie) qui l'ont rendue comme ça.
La peur encore et toujours, et à l'instar des gosses, quand la peur s'accompagne de zones d'ombres sur un sujet, c'est la porte ouverte à toutes les fables en fantasmes possibles...
Noirs qui font beaucoup trop d'enfants, de bruits et d'odeurs...
Homosexuels pédophiles, polygames et zoophiles...
Véganes sectaires, terroristes et tueurs d'enfants...
Femmes hystériques en puissance, manipulatrices et confortables victimes...
Animaux qui tueraient et mangeraient les humains s'ils étaient à nos places (même les vaches)...
etc
Et la moindre aide donnée à une minorité qui souffre est aussitôt interprétée comme un retrait de liberté à ceux qui sont en position de force.