Il Palazzo De Lerma, a due piani fuori terra, presenta il prospetto sul plancheto con il piano terra a semplici luci quadrate. Il portale di accesso, di chiaro stampo classicheggiante, a bugnato, si presenta decentrato rispetto al fronte al fronte nello spazio lasciato libero tra il plancheto e la Chiesa della Misericordia. Il primo piano è caratterizzato da slanciate finestre su cornici marcapiano poi trasformate nel ‘700 secondo la moda corrente in balconi. Le porte finestre sono coronate da un timpano a cornice spezzata. Il secondo piano presenta, in asse, altre tre porte finestre con timpano ad arco introflesso. Un ricco cornicione con pinnacoli corona il fronte. Il lato sinistro del fronte, dove è stato murato il portale della preesistente Chiesa della Misericordia, è caratterizzato da un severo corpo di fabbrica, sempre in pietra, il quale sino al 1962 era sormontato da un belvedere. Il portale della Chiesa della Misericordia, datato 1586, dalle chiare linee classicheggianti, presenta sull'architrave una iscrizione latina in lettere capitali e nel frontoncino un rilievo rappresentante la Pietà. Il prospetto secondario, su via Speranza è caratterizzato da un portale, tompagnato, con semi colonne bugnate sormontate da una trave, di chiara ascendenza classicheggiante, decorata da metope e triglifi. Il palazzo è internamente costituito da muratura a sacco con fodere esterne in conci squadrati di pietra calcarea e nucleo in pietrame e malta. La corte del palazzo, alla quale si accede tramite un androne con ampie volte a crociera, conserva la nobiltà originale nel portico, nei vestiboli e nella scala di accesso ai due piani superiori nonostante le sovrastrutture aggiunte e lo stato di abbandono dell'area interna dovuto all'attuale stato del condominio. Dal porticato, attraverso una scala a due rampe, coperta a botte, si sale al primo piano; di qui una scala a luce ridotta porta al secondo piano, probabile sopraelevazione di quello settecentesco, avvenuta nel secolo XVIII ad opera dell'arch. Valentino