关于军事学院设立的地点，杨琦与李秀宁商议多时以后拿出了两个方案，一个是设立在曲江池畔，一个是设立在骊山脚下，将李渊当初给杨琦建造的别院进行改造，自从杨琦有了封地以后，这个别院也就彻底空了下来，为了物尽其用杨琦才这样打算，而曲江池畔的房屋需要重新建造，花费自然是少不了的。

李秀宁将两个方案摆在李渊面前以后，李渊与裴寂，萧禹等人商议许久以后，才决定改造骊山脚下的安国公别院，对于李渊这样的选择，不出杨琦的意料，毕竟当初就说了，改造别院比较省钱。

既然地方选择好了，那么接下来的事情就是怎么改造的问题，这件事情依旧是由工部尚书武士彟牵头，为了打造一所适用于读书的学院，杨琦与武士彟，李秀宁亲自来到骊山脚下，如今亦是秋季，漫山遍野的花草开始换了装，树叶随风起舞，飘飘荡荡不知去了哪里。

别院是有人看守的，杨琦等人迈步进去以后，映入眼帘的是一块巨大的照壁，照壁上雕刻着喜鹊，梅花等物，按照武士彟的说法，这座照壁换作“喜鹊登梅”，寓意吉祥如意的意思。古人修建照壁的原因一是认为宅中可能会有鬼前来，而鬼听说是走直路不拐弯，所以修建照壁以断鬼路，其二就是风水的问题，说什么照壁可以阻断一切对于主人不利的因素等等。

既然现在这里要修建军事学院，那么照壁自然要更换，杨琦直接让武士彟雕刻一副猛虎下山，寓意从这里出去的人都将是猛虎下山，势不可挡。

越过照壁以后则是两排房屋，是用来居住守在门口的护卫及清扫前院的奴仆，按照杨琦的想法，此处只需留下一排房屋就足以了，另外一侧修建一些花草，当然也要雕刻一些古往今来名将的雕塑，比如孙武，孙膑，韩信，白起，霍去病，李广，卫青等，在雕塑下面也要介绍这些人的英勇事迹，这些也就不用杨琦细细去讲了，毕竟武士彟随意在国子监找个人就可以得到这些。

越过照壁以后自然是一段曲折游廊，游廊以后，则是一座宽大的大殿，而大殿两侧也有一些矮小的房屋，按照杨琦的意思，这些房屋也是需要推到重建，最起码建造一些提供给先生们居住的地方吧，杨琦的想法是建造一些独立的小院，这样先生们拖家带口生活在这里也比较方便。

大殿过后，面积就大了起来，以大殿为中轴线，两侧是一座座房屋，杨琦要求武士彟将左侧改造成学堂，学堂边儿将建立一座高约三层左右的藏书阁，以后学生们将可以在这里阅览书籍，右侧则会改造成学生住宿的地方，目前来说宗室及部分官员的子嗣多达一百五十余人，所以要分成三个班，每个班五十人，而住宿的宿舍则是二十个人一间宿舍，所以武士彟要改造将近八个宿舍，为了避免拥挤，杨绮要求武士彟建造十个宿舍，宿舍外围要建立围墙，以防这些人趁机逃课溜走。

住宿的地方说完以后，紧接着就是后花园了，后花园占地面积同样很大，杨琦要求武士彟将后花园彻底推平，建立一座演武场，演武场的面积要足够大，最起码一圈要有四百多米。武士彟转了一圈以后，觉得花园的面积差不多，应该可以满足杨琦的要求。

杨琦又带着武士彟转了一圈，学生的食堂，蹴鞠场应有尽有，而且最重要的是杨琦又要求武士彟在演武场旁边修建训练的东西，什么挂钩梯，箭靶，游泳池，单杠等，又建立了三个四百米障碍跑的跑道，里面有跨桩，壕沟，矮墙，高板跳台，云梯，独木桥，高墙，低桩网等。

将整座府邸转完以后，武士彟业已明白了杨琦的想法，武士彟当场表示，明天就会派人进驻军事学院，只要工部几百人的努力，半个月后军事学院就会彻底建成。另外杨琦还要求武士彟将四周围墙修建的高大一些，以防进来的人私自逃走，而武士彟当场表示，要不就修建一座小城堡得了，而且武士彟答应杨琦在别院原有的基础上进行扩建，对于武士彟这样的想法杨琦直接就同意了，一切权利都交给了武士彟。