Il Castello di Feltre, meglio conosciuto come Castello di Alboino, secondo ricerche storiche venne costruito su una preesistente torre di vedetta romana dal famoso re longobardo. Il Castello si posiziona nel punto più alto del Colle ed era completamente cinto da mura con quattro torri angolari, secondo la composizione tradizionale dei manieri presenti in tutta l'area. La torre settentrionale, in corrispondenza della Torre dell'Orologio, era detta Torre delle Polveri e di essa restano solo le fondamenta.
Al di sopra della porta d'ingresso al piano terra, sono scolpiti in bassorilievo tre stemmi: quello al centro presenta un castello turrito che è lo stemma della Città. Sulla facciata sud del Campanon era dipinto un leone di San Marco, simbolo della Repubblica di Venezia che governò la città dal 1404 al 1797.
Attulamente sono visitabili le due torri recentemente oggetto di restauro.
