"国防部"福利总处给水晶大厦造成的这一困扰，到1984年仍未消除。
在以借为名，实际占房方面，"国防部"福利总处也做得极为过分。
1976年9月15日，"国防部"福利总处所属的公教福利台北市供应中心主任、陆军上校林宝山给水晶大厦业主代表周其新送来一函，告知他们中心因装修地下室，二楼又无法迁进，请周其新将三楼一部分房屋暂借给他们，一旦装修完工后，立即迁出。
周其新知道顶不住，只得同意将三楼暂借给他们。
哪知，三楼房屋借出后，就成了刘备借荆州--有借不还。公教福利中心的兵痞子们将三楼作为他们变卖货箱、贪污分脏的秘密场所。
周其新怕得罪军方，希望他们自觉退还借去的房屋，结果等了一年，也不见他们归还！
到了1977年10月1日，周其新实在受不了，就给林宝山去了一函，告知三楼出租在即，请他们按原先的承诺，立即退出房屋。此函发出去8个月后，既不见退房，也不见林宝山回音。
1978年5月13日，周其新亲自上林宝山的门，林宝山告诉周其新，三楼目前不能退，还要继续使用一段时间。由于他们拒不退房，周其新原与另一个单位订的出租房屋合同被迫废弃，损失房屋租金达230万元。
周其新一想起这件事，心里就隐隐作痛。
5月16日，周其新又给公教福利品台北市供应中心去一长函，质问他们为何吞食诺言，迟迟不退房屋。林宝山感到此事再难以拖了，通知周其新到他那里去面谈。周其新一进门，林宝山就对他说："你不要急，我们迟早要退给你的。你们有点损失，也是敬军爱军，为'国防'做贡献嘛！"
周其新问："你们还得多长时间才能退出？"
林宝山说："大约10来天。"
5月23日，"国防部"福利总处公教福利品台北市供应中心才将弄得脏乱不堪的房屋退出。周其新怕他们又占此房，用一把大铁锁将房屋锁住，然后再与外面联系出租事宜。
周其新怎么也没有想到，没过几天，"国防部"福利总处下属的那些兵痞子对免费使用近两年的水晶大厦三楼仍依依不舍，偷偷将周其新上的锁砸了，又占用了退出的房屋。
周其新得知此事，欲哭无泪。
此外，"国防部"福利总处因在非法扣留权状等方面欺压水晶大厦的业主，造成业主们的各项经济损失难以计数。
周其新等业主长期受害，忍无可忍。
在走投无路之际，他想到了李敖，并向李敖诉说了多年来受"国防部"福利总处欺压的种种事实，要求李敖给他帮助。李敖听了，非常同情他们的遭遇，并当即表示马上代周其新写信去质问"国防部"。1978年5月16日，李敖代周其新给"国防部"写了一封质问信，问他们为何如此霸道，为何如此不择手段地侵害民众利益。
"国防部"先是不理，后又考虑不理似乎说不过去，于6月9日叫律师墨文藻给周其新草草回复了不痛不痒的几句话，对李敖所提的问题避而不答。
6月15日，李敖找出当局的有关政策，对"国防部"福利总处的回函，一一进行了反驳。
李敖代周其新写的反驳信发去后，一个多月不见回音。后经了解，台湾"国防部"已将此事交给总政治作战部查办。
8月11日，总政治作战部给周其新回函，告知请循法律办理。
按照1978年7月17日公布的"国防部"参谋本部组织法第八条规定，"国防部"福利总处是归总政治作战部管理的，此事应归他们处理。业主们向"国防部"如此详细地举出证据后，总政治作战部竟听信福利总处的一面之词，草草应付周其新等人的质问，显然是极其错误的。
7月22日，"国防部"福利总处叫律师墨文藻给水晶大厦送来一函，函中不但不认错，反而颠倒黑白，胡扯乱拉，并对周其新等人进行威胁。
7月23日，李敖给"国防部"部长高魁元去函，将"国防部"福利总处的函件进行了反驳，并从6个方面举证证实他们是如何欺压水晶大厦业主的。
8月24日，李敖再给"国防部"部长高魁元写信，向他指出：总政治作战部为福利总处主管机关，应依法受理人民诉愿及检举，还应根据来信内容查核是否属实，以明事情真相，再就是非、对错进行答复。而总政治作战部不但不对此事进行调查，反而叫民众用打官司的办法去办理，这样对待民众的诉求，是爱民吗？
李敖还在信中再次要求"国防部"对民众的诉求进行认真的调查，然后严惩福利总处中欺压百姓的不良分子。
此信发出去后，"国防部"与总政治作战部还是不理会。他们仍旧任其下属单位欺压百姓，受害百姓只有继续受害了。
此笔墨官司的最后的结局是：军事大衙门永远胜利，百姓永远失败。过去的唇舌、证据、文字成了鸡毛敲大钟，白费劲。枪杆子到底还是比笔杆子厉害。这一结局，正应验了一句俗语：秀才遇着兵，有理说不清。
1993年9月11日，李敖突然在报上看到一则消息，说"国防部"福利总处在水晶大厦的运货电梯因管理不善，钢缆突断，摔死了人，这是一起人为的责任事故。看到这则消息，李敖感慨万千，并想起5年前与这个军事大衙门的笔战，觉得应乘此机会，将他们在水晶大厦的丑事一一暴露出来，让人们看清口口声声要老百姓"敬军"、"爱军"的这个军事大衙门对人民是一副什么嘴脸。
9月22日，他找出5年前与"国防部"打笔仗的资料，写了2.6万字的《跟"国防部"打笔仗》一文，揭露"国防部"福利总处在18个方面欺压、勒索百姓，并在报刊上公开刊载出来。
过去，台湾民众因怕戴上不爱军、不敬军的大帽子，无人敢惹军事大衙门"国防部"，李敖不但不怕，而且还公开在报刊上揭"国防部"的丑，丢"国防部"的脸，为水晶大厦的所有受害人出了一口气。
奋力揭开监狱中的黑幕
1981年8月10日，李敖二度入狱，刑期为6个月，服刑地点为台北县土城乡立德路2号台北看守所。
台北看守所系台湾32座监狱中最大的一座，原计划关押犯人2600人，实际关了3300人，超关600人，关押的犯人占全岛犯人二分之一以上。
李敖属轻刑犯，本应关在台北监狱。台湾当局的"法务部"考虑台北监狱太拥挤，没有单独监房，如果将李敖与其他犯人关押在一起，会知道很多内幕，故将李敖关在台北看守所的一间单房里。
