Pourfendeur du racisme, l’archevêque noir de York se retire