Te recuerdo que el displacement solo va en una direccion. Si quieres que vaya a ambas, es posible pero se pone mas complicado.
Si va en una sola direccion, pues negro = nada, blanco = muy alto.
Si va en dos, 50% gris = normal, blanco = alto, negro = bajo.