Der Calvary befindet sich in der Gegend von Woodside/Long Island City in Queens und ist der erste große Friedhof, der außerhalb der Insel Manhattan von den Treuhändern der St. Patrick’s Cathedral angelegt wurde. Die Alsop-Farm mit einem Familienfriedhof und weiteren 115 Acres wurde 1845 erworben. Der Friedhof wurde im August 1848 von Erzbischof John Hughes eingeweiht. Im Laufe seiner Geschichte wurden weitere 250 Acres hinzugefügt. Die vier Hauptabteilungen des Kalvarienbergs, die gemeinhin als Alte/Erste, Zweite, Dritte und Vierte bekannt sind, werden formell als die Abteilungen von St. Callixtus, St. Agnes, St. Sebastian und St. Domitilla bezeichnet, um den antiken römischen Katakomben zu entsprechen. Die 365 Hektar wurden in 71 nummerierte und identifizierte Abschnitte unterteilt.
Eine große Kapelle befindet sich im ersten Kalvarienberg. Ursprünglich ein Fachwerkbau, wurde sie durch einen Kalksteinbau ersetzt, der 1908 von Erzbischof John Farley feierlich gesegnet wurde. Einzigartig im Design, weist die Kapelle Bas-Relief-Schnitzereien über den verschiedenen Eingängen auf und ist mit einer Granitstatue des Heiligsten Herzens Jesu gekrönt. In dieser Kapelle wird regelmäßig die Eucharistie für die auf dem Kalvarienberg Bestatteten gefeiert, zu dieser Zeit mehr als 1.750.000.