Il Palazzo del Governatore è il più alto tra gli edifici pubblici sul lato a valle della piazza. In origine era alto quanto gli altri, ma fu sopraelevato di un piano nei restauri eseguiti nel 1925 dall’architetto Ruggero Antonelli (Perugia 1888-1974), che ripristinarono a tutto sesto le finestre del secondo piano e le donarono un aspetto romanico. Nel 1450 la città aveva ottenuto da Niccolò V Parentucelli (1447-1455) l’invio di un Governatore Pontificio per non dover sottostare al dominio di Perugia. Nel decennio seguente fu costruita una residenza per il magistrato, che prese il posto dell’orto del Comune tra il Palazzo dei Priori e la prima residenza del Governatore.