Este complejo tiene una larga historia y ha albergado varias instituciones. Comenzó en la década de 1890 con la Escuela Perkins para Ciegos, operando su primera escuela infantil para niños ciegos. La Escuela Perkins utilizó este término para una escuela que sirvió a niños de hasta 5o grado. Helen Keller, la alumna más famosa de la Escuela Perkins visitó a los estudiantes aquí para inspirarlos en sus estudios. (No queda ninguno de los edificios de la Escuela Perkin). En 1912, la Escuela Perkins consolidó todos sus servicios cuando compró su actual sitio en Watertown.
El complejo lo compró la Arquidiócesis de Boston. Abrieron una especie de orfanato para niños (usando el término libremente) que se llamaba la Casa del Ángel Guardián (HAG por sus siglas en inglés para sus ocupantes). El muro con las cruces fué construido para mantener a los chicos dentro. HAG no era mucho mejor que los reformatorios de la época en ese tiempo no se prestaba mucha atención al cuidado de los niños. En 1951 la Arquidiócesis construyó un seminario aquí como una institución preparatoria para San Juan en Brighton.
Estos son los edificios de ladrillo que vemos ahora. El seminario se llamaba Cardenal O'Connell Seminary y funcionó hasta 1968. William O'Connell fue el primer cardenal de Boston, que fue nombrado en 1911. O'Connell creía en la "integración separatista", la idea era que los católicos irlandeses debían tener instituciones separadas pero iguales a las de los protestantes en Boston. Promovió la Organización Católica de la Juventud (CYO) en lugar de los Boy Scouts protestantes o la YMCA y la construcción de las principales instituciones católicas como Boston College y el College of the Sacred Heart para equiparar a Harvard o Wellesley Colleges. Una anécdota curiosa es que Rose Fitgerald (la madre de JFK) quería ir a Wellesley pero el cardenal católico de la época le escribió una carta personal para pedirle que no fuera. Acabó yendo a una universidad católica, la universidad del Sagrado Corazón Manhattanville.
La Sociedad de Massachusetts para la Prevención de la Crueldad contra los Animales (MSPCA) se trasladó a este complejo en 1976 (desde su antiguo sitio en Longwood Avenue). La MSPCA y la American Humane Education Society (AHES) fueron fundadas por el Dr. George Angell y tienen una reputación nacional. Además de ser la sede de esas dos organizaciones, el Angell Animal Medical Center se encuentra aquí. En los últimos años, MSPCA ha comenzado a cambiar aspectos del muro institucional para hacerlo más amigable y abierto por petición de la comunidad.