1971年9月14日，林彪座机坠落在蒙古境内，林彪在杭州的"704行宫"也随后被发现。
这座行宫，盖有4栋别墅，分别为壹号、贰号、三号和肆号楼。4栋别墅散落于绿树之中，占地面积为307亩。壹号楼供林彪一家居住，贰号楼是座游泳池，一是为叶群喜好而建，另一个目的是为其儿子林立果选美，此游泳池在七十年代是世界一流的半标准池，装有大型空调和吸音板，以及自动循环过滤系统和自动出水控制系统，自动恒温装置等。三号楼位于壹号楼的对面，是供林彪的四大干将：黄永胜、吴法宪、李作鹏、邱会作居住的，因此，该楼又被称为将军楼。肆号楼则是给林彪在浙江的代理人陈励耘居住的。
四栋别墅虽说风格各异，从外表看都显得古朴而平凡，但一走进里面，其设计之精巧，安全防范之严密，设施之华丽让人惊叹。可见其耗时、费力且投资巨大。
据介绍，当时为建设这座行宫动用了大量的工程兵部队和七十九个单位的7000多名民工日夜苦战，用了一年零二个月，花费人民币3100多万元。四栋楼的总面积为28452平方米。
七零四工程，是林彪为发动"571"武装政变而在杭州设立的一个军事基地，由于以"571"工程命名，易暴露其阴谋，所以就以当时建造年月为代号，因其是1970年4月造的，故称"七零四"工程，后来人们将它叫做林彪的七零四行宫。
而七零四行宫透出的神秘主要来自于林彪一家居住的壹号楼。
壹号楼是当时占地面积最大的一座建筑，四栋楼的总面积为28452平方米，壹号楼就有12000多平方米，内有接见大厅、影剧院、会议中心、餐厅、厨房和大套间等等。据介绍，初次设计时，只有一个楼层，并在四周配以小桥流水。后因林彪晚年时极度怕水，又觉得一层楼的安全系数不大，因此，后来作了重大改进，将楼增加一层，成为二层小楼，而且上下层的房型一模一样，四周的流水换成了草坪。林彪对这一改进十分欣赏，当时曾为此亲笔题写"精心设计，精心施工"。
"704行宫"从外面看与中国当时的一些别墅没有多大区别，但其设计之精巧，用材之高档，足见其奢华。踏上壹号楼的旋转楼梯就发现其不凡和精到之处。按常理壹号楼只有二层，根本不需要旋转楼梯，设立旋转楼梯是考虑到当时林彪年事已高，身体不太好，旋转楼梯可以在设置一段踏步后，再设置一节平台，让林彪爬一段踏步后，在平台上歇歇脚，再爬踏步。这个旋转楼梯用的是特优天然大理石，造价之高可见一斑。
进入室内，地上铺着的红色地毯已显破旧，是当时中国国内造价最贵的纯羊毛地毯。为了给"704行宫"赶制地毯，地毯厂放弃了11个国家的出口计划。在壹号楼还有一个设计精致酷似凉亭的封闭式日光浴室。林彪到晚年后，有一个特点就是十分怕水，怕水的他，一年四季难得洗澡。从林彪的健康着想，医生建议他进行日光浴。
于是在壹号楼建造了一个日光浴室，日光浴室实际上是一个玻璃浴室，其特制的玻璃可以滤掉阳光的有害射线，而且可以防弹。外面的人看不到在日光浴室的林彪，而林彪却可以通过大型闭路电视监控系统，监视"704行宫"的每一个角落。
林彪怕水，自然对下雨的水滴声不感兴趣。为了不让雨水顺屋檐滴到地面发生水滴声，设计者为此也颇费了一番心思，于是整个房屋的房顶用8～12 层材料组成一个特殊的暗水流沟系统，这种特殊装置，可以将雨水自行消失在瓦缝里不会下滴，再通过暗沟排出去，从而使雨中的别墅群没有水滴声，显得很安静。这样的特别设计，在整个别墅群中随处可见。
而且，考虑到战时需要和从安全的角度出发，七零四行宫机关重重，安全防范措施十分严密。其中也足见林彪的恐惧防范之心。
在重要设施地下室里，一些通道与出口的门，都是重达500公斤的各型根据需要而制造的防弹、防毒、防水钢门，从而使地下室形成一个完全独立的高强度、极安全的军事基地。在地下室还设有一部专用电梯，直通林彪卧室，一旦遇有紧急情况，林彪可直接乘电梯快速进入地下室。
在这座被喻为原子弹都无法摧毁，如此安全的地下室里，林彪依然怕发生意外，为防范有人进入地下室，地下室通往林彪卧室的通道建设了一段特殊的回音通道，一旦有人进入这一通道，监听者可通过强大的脚步回音马上发现来人。发现是外来者，可迅速采取措施，予以狙击。
最易被袭击的各房间的门窗玻璃，也是特别设计安装的，它由防弹玻璃、防紫外线玻璃及普通玻璃组成的三层玻璃门窗，这样一安置，不仅具有保温、防紫外线辐射和防弹功能，而且让人惊奇的是，当你从室内向室外看，外面的物什一览无余，而从室外却看不到室内任何东西，这种设置可保证房内人的安全，又保证了机密。林彪有时到阳台上晒太阳，为了保证安全，封闭的阳台还设有监控装置，可以监控别墅的各个地方。
在考虑外来袭击的同时，设计者为了保证林彪的安全，在室内也讲究安全性。这可从一盏灯的设置上见其用心之良苦。在林彪卧室里有一盏看起来并不起眼的灯，但当你了解其功用后，不得不赞叹其用心之良苦，这盏灯是挂在林彪卧室的灯，像一顶农家草帽，俗称莲花灯，是用藤条绕制成一个草帽形状，外面包着一层乔其纱。这样一来，即使因意外，灯从上脱落，特制的这个草帽形灯托就会像降落伞一样轻轻落下，而不会砸伤人。
