Varios documentos que datan de 1062 a 1102 dan las primeras indicaciones de una torre situada en el punto de división de las aguas que fluyen alrededor de la ciudad. Se llamaba Turlonga (Torre Larga) y casi con seguridad se construyó entre los siglos IX y X, como el punto cardinal de las defensas, pero también como un símbolo del poder del obispo sobre la ciudad. Una tradición del siglo XVI sostuvo que Ezzelino da Romano construyó dos torres, una grande al oeste y otra más pequeña al este, llamada Zilie, del nombre del arquitecto-constructor Zilio, y que ambas torres debían servir como cárceles horrendas para Los que se oponen a su régimen. Las dos torres con torretas, pintadas en cuadros rojos y blancos, se ven en los frescos que pintó Giusto de'Menabuoi en 1382, para la Capilla Conti en la Iglesia de San Antonio. El constructor real de las dos torres es desconocido y el mayor de los dos, el Torlonga, fue levantado de una torre de vigilancia más pequeña de los siglos XV al XI. Las investigaciones estratigráficas muestran que la parte inferior de lo que ahora se llama Specola, a una altura de nueve metros, está compuesta por las paredes gruesas de tres metros de la torre más antigua. La parte elevada con almenas y agujeros, para dejar caer aceite u objetos, data del período Carraresi. Las investigaciones arqueológicas también revelaron la presencia de una segunda fortificación que siguió a lo largo de la orilla del río. Esta es una torre, visible en el fresco de Giusto, que precede a la construcción de las murallas de la ciudad. Era una especie de muro que protegía los lados norte y este de Torlonga, donde el río no ofrecía protección. El trabajo de restauración en los años 80 y 90 trajo a la luz la decoración interior ordenada por Francesco el Viejo. La sala con el gran carrito (símbolo del Carraresi), la sala de los "loros" y otra sala con las iniciales del signore dan testimonio del ambiente refinado y culto de la corte de Carraresi. Después de la conquista veneciana, Torlonga se convirtió en una tienda de municiones. El 21 de marzo de 1767, estas tiendas se retiraron y se comenzaron a trabajar para adaptar la torre como el nuevo Observatorio Astronómico. El aspecto actual de la parte superior de la Specola (torre de observación), junto con los observatorios, es el resultado de las renovaciones realizadas por el abad Domenico Cerato y de otros desarrollos en el siglo XIX.