De padre ferroviario, Castle nació en Scholes, Inglaterra,[1]​ y estudió en la Honley High School.

En 1973 Castle colaboró con el actor y humorista Ronnie Barker en Another Fine Mess (un episodio de una serie llamada Seven of One).

Así, Castle tocaba la trompeta mientras que Edwards se sentaba delante del patio de butacas leyendo un periódico, bailando claqué y tirando pelotas de ping-pong a las butacas.

En 1972 empezó a presentar Record Breakers, un programa infantil en el que permaneció casi 20 años.

De los últimos, el más destacado fue Songs For A Rainy Day, grabado en 1966 para Columbia Records y regrabado en formato CD por EMI Gold con el título de Isn't This A Lovely Day.

En el disco se recogen 12 canciones cuyo tema central es la lluvia.

[4]​ Castle se casó con la bailarina Fiona Dickson en 1963[5]​ tras ser presentados por Eric Morecambe.