Den siste av de private eierne, Jørgen Coldevin, solgte stedet til Fana kommune i begynnelsen av 1900-tallet. I dag hører bygningen til Fana Folkehøgskole.
Eldste rennesansehagen?
Steinmurene som omkranser den fredete bygningen og hageanlegget, er i seg selv praktfulle. Milde-krokusen, som blomstrer i mai måned, er velkjent. Den dekker store deler av anlegget. At hagen rommer den hittil eldste kjente renessansehage i Norge, er mindre kjent. Med årringstellinger på den vintergrønne busken, buksbom, dateres terrasseanlegget til ca 1670, eller litt før baronihagen i Rosendal ble anlagt.
Arboretet, som er anlagt på Store Mildes grunn, ble etablert i 1971, som en egen stiftelse i samarbeid med Universitetet i Bergen.