Allí, Palmer se asoció con un grupo de artistas influenciados por Blake conocidos como los Antiguos (incluidos George Richmond y Edward Calvert).
El padre algo desacreditado de Palmer, Samuel Palmer padre, se mudó al área, su hermano Nathaniel le ofreció una asignación que lo "haría un caballero" y restablecería el buen nombre de la familia.
La enfermera de Palmer, Mary Ward, y su otro hijo William se unieron a él allí.
La Waterhouse se usó para dar cabida a invitados desbordados de la "Rat Abbey".
En 1828 Samuel Palmer dejó "Rat Abbey" para unirse a su padre en la Waterhouse y vivió allí por el resto de su tiempo en Shoreham.
Parte de su razón para regresar a Londres era vender su trabajo y ganar dinero con la enseñanza privada.
Palmer se volvió más hacia la acuarela, que estaba ganando popularidad en Inglaterra.
Para aumentar sus preocupaciones financieras, su disoluto hermano William había empeñado todas sus primeras pinturas, y Palmer estaba obligado a pagar una gran suma para canjearlas.
Pero fue solo cuando una pequeña seguridad financiera se cruzó en su camino, cuando fue capaz de mudarse a la Furze Hill House en Redhill, Surrey, desde 1862.
Samuel Palmer murió en Redhill, Surrey, y está enterrado con su esposa en el cementerio de Reigate.