Pillay nació en Durban, Sudáfrica, en 1941 bajo la sombra del régimen del Apartheid. Conoció la discriminación como un muro levantado cada día frente a su propia vida