Verschiedene Dokumente aus den Jahren 1062 bis 1102 geben erste Hinweise auf einen Turm, der sich an der Trennstelle der Gewässer befindet, die die Stadt umgeben. Es wurde Turlonga (langer Turm) genannt und wurde zwischen dem 9. und 10. Jahrhundert fast sicher als Kardinalpunkt der Verteidigungsanlagen, aber auch als Symbol der Macht des Bischofs über die Stadt erbaut. Nach einer Tradition aus dem 16. Jahrhundert errichtete Ezzelino da Romano zwei Türme, einen großen westlichen und einen kleineren im Osten, den Namen Zilie, aus dem Namen des Architekten und Bauers Zilio, und beide Türme sollten als schreckliche Gefängnisse dienen diejenigen, die sein Regime ablehnen. Die zwei Türmchen mit roten Türmchen, die mit roten und weißen Karos bemalt sind, sind in den Fresken zu sehen, die Giusto de'Menabuoi im Jahre 1382 für die Conti-Kapelle in der Kirche des Hl. Antonius gemalt hat. Der eigentliche Erbauer der beiden Türme ist unbekannt und der größere der beiden, der Torlonga, wurde tatsächlich von einem kleineren Wachturm aus dem 10.-11. Jahrhundert erbaut. Stratigraphische Untersuchungen zeigen, dass der untere Teil des heutigen Specola mit einer Höhe von neun Metern aus den drei Meter dicken Mauern des älteren Turms besteht. Der erhabene Teil mit Kerbungen und Löchern zum Ablassen von Öl oder Gegenständen stammt aus der Carraresi-Zeit. Die archäologischen Untersuchungen zeigten auch das Vorhandensein einer zweiten Festung entlang des Flussufers. Dies ist ein Bergfried, der in Giustos Fresko zu sehen ist, das vor dem Bau der Stadtmauer liegt. Es war eine Art Mauer, die die Nord- und Ostseite des Torlonga schützte, wo der Fluss keinen Schutz bot. Restaurierungsarbeiten in den 1980er und 1990er Jahren brachten die Innenausstattung von Francesco the Elder zum Vorschein. Der Saal mit dem großen Wagen (Symbol der Carraresi), der "Papageienraum" und ein weiterer Raum mit den Initialen des Signore zeugen alle von der raffinierten und kultivierten Atmosphäre des Carraresi-Hofes. Nach der venezianischen Eroberung wurde der Torlonga in ein Munitionslager umgewandelt. Am 21. März 1767 wurden diese Läden entfernt und weitere Arbeiten zur Anpassung des Turms als neues astronomisches Observatorium begannen. Das heutige Erscheinungsbild des oberen Teils des Specola (Aussichtsturm) mit den Observatorien resultiert aus den Renovierungen, die von Abbot Domenico Cerato durchgeführt wurden, und aus den weiteren Entwicklungen im 19. Jahrhundert.