Il palazzo sorgeva sulla parte occidentale della terrazza alluvionale occupata dal borgo di Colmirano, sul lato prospicente il torrente Fiumesel (detto anche Formisel) e il borgo di Alano. Era delimitato a sud dalla via comunale detta allora "Strada del pozzo", a nord dalla via comunale detta "Strada della Stua e di San Daniele" e a est dal piazzale nel quale confluivano le strade predette e dal quale si dipartiva la  via comunale detta "Strada della calle della Messa". 

Al centro del piazzale era ubicato il pozzo, che costituiva la fonte di approvvigionamento idrico per la gente del borgo, mentre il palazzo era servito da un acquedotto privato derivato da una sorgente in località Ponte della Stua. Dell'acquedotto che alimentava la villa si conservano alcune fistule aquarie in laterizio.

Il palazzo si componeva di un corpo centrale, che ospitava l'abitazione padronale, e di due ali, disposte grosso modo ad angolo retto tra loro, che ospitavano gli alloggi del personale e le strutture di servizio agricolo del complesso edilizio.

Il corpo di fabbrica principale comprendeva una corte interna e aveva una insolita pianta ad angolo esposto orientata verso sud. La facciata di rappresentanza dell'edificio era esposta a sud-est e guardava la via principale di accesso al borgo di Colmirano per chi proveniva da Fener e dalla Via Feltrina, strada chiamata allora "Cal Trevisana". 

La facciata, di pregevole impostazione architettonica, era arricchita da un loggiato a due ordini.  L'ordine inferiore, posto al piano rialzato, era costituito da tre archi a sesto pieno sorretti da quattro pilastri in conci di pietra. L'ordine superiore era costituito da una trabeazione orizzontale in pietra che sosteneva una copertura con timpano centrale ed era a sua volta sorretta da quattro coppie di colonnine in pietra di stile classico.

L'ala est dell'edificio comprendeva le scuderie, tuttora individuabili grazie alla presenza di finestrature alte con riquadri in pietra e inferriate. Al centro del corpo di fabbrica dell'ala est, in corrispondenza delle scuderie, era presente un fornice carrabile che consentiva di accedere al piazzale interno del borgo.

Il corpo centrale del palazzo e l'ala ovest si affacciavano sul "brolo", al centro del quale era ubicato un piccolo gazebo. Il brolo era delimitato sul fronte anteriore da una recinzione in muratura che si apriva con una cancellata retta da quattro pilastri. Sulla sommità dei pilastri erano collocate statue in pietra raffiguranti, secondo l'uso rinascimentale e barocco veneto, personaggi mitologici.

La strada di accesso alla villa sovra-passava la "strada comunale del pozzo", che attraversava il corso del torrente Fiumesel (o Formisel) su un ponte in pietra collegando Colmirano con Alano.