Vilu se eklektickou zahradou s mnoha dochovanými původními prvky si dal vybudovat jindřichohradecký rodák Alois Josef Landfras, český knihtiskař a vydavatel lidových knih. Ve městě se stal předním činitelem společenského i kulturního života jako radní a v letech 1850 až 1861 i jako starosta.

Vila na Karlově patří k nejvýznamnějším dílům jindřichohradeckého stavitele Josefa Schaffera. Jednopatrový dům v empírovém či klasicistním stylu měl původně obdélný půdorys, kryla ho valbová střecha.

V roce 1937 na přání Marie Landfrasové architekt Antonín Mečíř přistavěl k vile severní křídlo a změnil tak obdélný půdorys na téměř čtvercový s obdélně vykrojeným rohem.

Vskutku významným architektonickým dílem je zahrada, kterou navrhl a v letech 1826 až 1839 vybudoval Josef Schaffer podle přání majitele. Osvícenský a obrozenecký altruismus se projevil v Landfrasově rozhodnutí, že zahrada bude přístupná i veřejnosti.