文革时期，别墅属“非开放地区”，在此地区附近不允许有民用建筑物，在别墅岗亭边设有电网，标志着特殊地界，未经允许，不得进入。

别墅建设初期，曾利用军用飞机选址，由十多位地理学家勘察地势，该址“冬不冷、夏不热、秋不燥、春不潮”，而且四周都是高山，只有一条路入内，易守难攻。