Mal davon abgesehen, dass es verschiedene menschliche Rassen ja eigentlich gar nicht gibt, taugt das Konstrukt der "Rasse" aber nur bedingt als Erklärungsansatz. So nehmen wir z.B. auch Chinesen und Japaner als äußerlich deutlich verschieden vom mitteleuropäischen Menschentypus wahr, begegnen ihnen aber kaum in rassistischer Form.
Ich denke, dass es bei der Ablehnung von Ausländern oft um die Ablehnung von Kulturen geht, die uns nicht nur fremd, sondern auch in irgend einer Form als bedrohlich erscheinen.
Dann musst du mir mal erklären, warum auch der dunkelhäutige gebürtige Schwede, der vielleicht Christ, Buddhist oder Atheist ist, ebenfalls Diskriminierungen ausgesetzt ist, wenn das nichts mit Rassismus zu tun haben soll.