Efectivamente, el cable s-video lleva 4 hilos, y lo mas normal es hacerlo con 2 coaxiales: uno es para la luminancia y otro para la crominancia.
Lo ves en blanco y negro porque solo has conectado el de luminancia, por tanto tienes que añadir otro coaxial. Mejor que sean finos porque si no tendras problemas en los conectores.
El esquema aqui:

http://www.hardwarebook.net/connector/av/svideo.html