紅樓，其實是建在南泥灣鎮桃寶峪村的中央管理局干部休養所。因為外表用紅色涂料涂染，三五九旅官兵和當地百姓習慣把它稱為：紅樓。1943年，南泥灣大生產取得一定的成效后，中央管理局決定在南泥灣修建一處干部休養所。

三五九旅旅長王震接到命令后，親自選址，并邀請延安最年輕（時年23歲）的甲級工程師張協和設計紅樓。三五九旅官兵和炮校學員夜以繼日加班建設，僅用七個月就完成了紅樓主體建設和內部裝修任務。

1943年9月，紅樓竣工后，在延安的中央領導人就連續不斷的來到紅樓修養，為陪伴好中央領導，三五九旅旅長王震索性也將旅部一部搬到紅樓后的山腰上。白天陪領導打獵、下棋、寫字，晚上吃野味喝燒酒，跳交際舞。據當地老百姓說：來的最多的是朱老總。因為朱老總愛打獵，南泥灣山上狗熊、野狼等山貨多。