La Sociedad Histórica de Ipswich (IHS) en Ipswich, Massachusetts, fue fundada por el reverendo Thomas Franklin Waters en 1890. Inicialmente, la Sociedad no tenía sede y se reunía en el estudio del artista Arthur Wesley Dow . Finalmente, encontraron un lugar mejor para reunirse en el Odd Fellows Hall. El primer proyecto importante de la Sociedad sería restaurar la Casa John Whipple y convertir parte de ella en su sede.
La casa Heard (1795-1800) fue vendida al IHS en 1936 por Alice Leeds Heard, también conocida como Elsie. Era la residencia familiar del empresario estadounidense Augustine Heard . Vendió la casa con el acuerdo de que podría vivir en ella durante el resto de su vida. Tras su muerte en 1953, se instaló una placa en la casa para conmemorarla. La casa Heard ahora cuenta con muchas colecciones, como la Colección de Comercio de China, la Colección Arthur Wesley Dow y la Colección de Pintores de Ipswich.