Fue construido para el segundo conde de Gosford y diseñado en estilo neonormando por el arquitecto londinense Thomas Hopper.
[2] Los Condes de Gosford ocuparon el castillo hasta 1921, y más tarde el Ministerio de Agricultura compró la propiedad para formar Gosford Forest Park.
En su lugar se construyó una casa señorial, que los Acheson ocuparon hasta 1840.
El escritor Jonathan Swift visitó Gosford y contribuyó al diseño de los jardines.
En 1837, se informó que el edificio no estaba terminado y no estuvo completamente terminado hasta 1859, cuando el asistente de Hopper, George Adam Burn, reconstruyó el frente de entrada.
El castillo en este momento estaba en un estado desesperado de deterioro y sin una intervención urgente estaba en peligro real de volverse irreparable, lo que llevó a la Sociedad del Patrimonio Arquitectónico del Ulster (UAHS, por sus siglas en inglés) a llamar a la acción.