裴寂的判断还真没有出错，许敬宗当初想去武库别署，还真就抱着架空赵云泽的心思。
许敬宗是个官『迷』。但凡官『迷』，都贪恋权势。许敬宗这个人能力还是挺强的，可是他的人品不行。此人毫无信义可言，还在隋朝时，为了抱『奸』相宇文化及的大腿，连他的亲爹都可以出卖。
明君用大臣，首重人品，次重能力。唐高祖李渊怎么说也是开国之君，也算的上是明君了。因此，虽然许敬宗出仕很早，可李渊一直就没怎么看得上他。有了事情，把他拉出来顶一下差事。没事就又把他丢一边了。所以，许敬宗当了这么多年官，才只是个从六品的本衔。他的职事也只是个中书省的秘书郎，说白了，就是个文书，根本就没有什么权力。
对于李渊，许敬宗自然是满腹怨言。李世民登基以后，许敬宗以为自己的春天来了。好歹，他也是出自秦王府之人啊。可是，现实却给了许敬宗迎头一击。眼瞅着秦王府的那些官员，一个个都被李世民调整了职事，唯独他许敬宗，仍然当着中书省的文书。
武库别署一成立，许敬宗敏锐的意识到了武库别署的重要『性』。他再一看武库别署的官员构成，好嘛，全是一帮小青年。尤其是武库别署的主官赵云泽，还是个刚刚出仕的菜鸟。这下，许敬宗动起心思来了。
自己好歹也为官十多年了，要是自己去了武库别署，这帮小青年还不任自己拿捏？自己也可以尝尝大权在握的感觉了。
于是，许敬宗就主动向李世民申请去了武库别署。
可是，令许敬宗没有想到的是，赵云泽这个官场菜鸟，做起事来居然一点也不菜。而且，他弄出的很多规章制度，比起别的衙门来更有约束力。
最让许敬宗佩服又气恨的一点就是，赵云泽可以将别的权力下放，偏偏把人事权和财务权抓的死死的。抓住了这两项权利，赵云泽就等于把整个武库别署拿捏在了他自己手中。
尤其是财权，赵云泽制定了详细的财务管理制度，把武库别署的钱粮使项都控制的死死的。就算是杂项开支，也有着严格的申报、核销规定。动用五十文以下，必须经方直审核同意；动用五十文至一百文，必须经阎立本审核同意；动用一百文以上，则必须经赵云泽本人审核同意。
许敬宗身为主簿，身兼文书和会计的双重职责。别的事情，许敬宗『插』不进手，他就想着打打钱粮的主意。可是，在赵云泽制定的严格的财务制度之下，许敬宗完全沦为记账员了。
许敬宗原本以为赵云泽有管理能力，但他不一定懂做账。毕竟，算学一道，在这个时代不被重视，习算学的读书人很少。于是，许敬宗就想着在账本上动动手脚。
武库别署刚开衙时，用钱的使项太多了。许敬宗便故意记错一笔账，只是十几文钱的错漏。他把账本交给赵云泽审核，想借此试探赵云泽。
也不知道赵云泽是怎么审的账，反正许敬宗只看到赵云泽用鹅『毛』笔在一张纸上写了一大片鬼画符一样的东西，然后就点出了两笔错账。一笔是许敬宗故意记错的那笔；另外一笔，只是两文钱的错漏，这却不是许敬宗故意记错的了。
这下，许敬宗傻眼了。要知道，他做这一期的账本时，可是花了整整一个上午才把账本做完的，可人家赵云泽审核账本，也就用了两刻钟的时间。
就是这样，赵云泽还摇头叹气说，要是有把算盘就好了，那他最多耽误许敬宗一刻钟的时间。赵云泽还说，等武库别署的工匠得闲了，先让工匠们做上几把算盘，然后，他再教许敬宗如何运用算盘算账和如何用复式记账法做账。
我用的着你教？！许敬宗很失落。
其实许敬宗对赵云泽的怨气，不光是公务上的。
还在武库别署的官员第一天到兵部应卯时，许敬宗就大拍赵云泽的马屁，主动给赵云泽擦坐凳。可是赵云泽对许敬宗当时的举动却大为嘲讽。
赵云泽当时说的话，就像钉子一样扎进了许敬宗的心脏上。从那时起，他就把赵云泽给恨上了。他就想着有朝一日一定要收拾了赵云泽，狠狠的出一口恶气。
恰巧，这个赵云泽居然得罪了太上皇和裴寂。有了太上皇和裴司空这位朝中第一人撑腰，许某人自然是乐颠乐颠的要对赵云泽下手了。
许敬宗花了一晚上的时间，为赵云泽罗列好了罪名。
第二日武库别署散衙之后，许敬宗一回长安城，就拿着他为赵云泽罗列的罪名跑到了裴寂府上。
裴寂看完许敬宗写的东西，对许敬宗大为夸赞了一番。
许敬宗又与裴寂密谋一番过后，便直接在裴寂家写了份弹劾赵云泽的奏折，署名却是署的胡江的。
胡江也是个傻缺。当裴寂把许敬宗写好的奏折拿给躺在床上的胡江看时，胡江简直是以乐疯了的态度，欣然同意了裴寂和许敬宗的做法。他根本就没意识到裴寂和许敬宗在拿他当枪使。
于是，第二天散朝过后，李世民的书案上就有了一份胡江弹劾赵云泽多行不法之事的奏折。
许敬宗为赵云泽罗列了七大罪：
一，居心叵测。赵云泽将武库别署称之为“祝麓山庄”，其“祝麓”二字，合“逐鹿”之音。赵云泽其心可诛。
二，私制法令。武库别署各项规章制度，皆出自赵云泽之手，且多与朝廷各衙门规制相悖。
三，暗植党羽。赵云泽到任武库别署署令后，极尽拉拢人心之能事，武库别署一班官员，唯赵云泽之命是从，不论对错。
四，骄横跋扈。赵云泽执掌武库别署，其令出必践，容不得他人意见。赵云泽常挂在嘴边两句话。其一，“第一，署令大人说的都是对的，第二，若署令大人说的不对，请参照第一条执行。”其二，“我的命令，你们理解了要执行，不理解，那就在执行中加深理解。”
五，公器私用。赵云泽对别署官员吏役及工匠，只以个人好恶『乱』行赏罚。
六，挥靡国财。赵云泽私自改工匠一日两餐为一日三餐，且伙食丰盛。赵云泽以武库别署公帑，私行酿酒、净盐之事。且把所得之酒、之盐，作为赏物分发于别署众员，以国财为其拉拢人心。至于赵云泽有无私下售酒、售盐，尚未查证。
七，疑其行凶。赵云泽对别署内卫团旅帅胡江，向来恶之。胡江被凶徒打断腿一事，疑为赵云泽指使。其目的，就是想将胡江赶出武库别署。