看法一：卫青墓之庐山是匈奴之卢山
关于卫青墓所象之庐山一直不太好解释此山究竟为何山，最早给出有所依据解释的人是胡三省的注资治通鉴：
长平烈侯卫青薨。起冢，象庐山。〔庐山，盖即卢山。杨雄所谓“填卢山之壑”者也。师古曰：卢山，匈奴中山名。卫青冢在茂陵东，次霍去病冢之西，相并者是也。〕
——《资治通鉴注·卷二十一·汉纪十三》
胡三省用推测的语气说庐山大概就是卢山吧，并给出了可查的论据。
臣闻八蛮之寇，莫甚北虏。汉兴，高祖窘平城之围，太宗屈供奉之耻。故孝武愤怒，深惟久长之计，命遣虎臣，浮河绝漠，穷破虏庭。当斯之役，黔首陨于狼望之北，财币縻于卢山之壑，府库单竭，杼柚空虚，算至舟车，赀及六畜。夫岂不怀，虑久故也。
——《后汉书·西域传第七十八》
这种说法有两个问题首先是庐山与卢山是不是同一概念？其次即便是卢山，那么卢山和卫青有什么直接相关性吗？只有这两个答案都站得住脚才行。
答案是“庐”与“卢”字在汉书中被班固分的很清晰，班固没有混淆；其次匈奴之卢山在史记汉书里面也和卫青没有找到相关性。所以胡三省用的是“盖”用的是推测语气。
且夫前世岂乐倾无量之费，役无罪之人，快心于狼望之北哉？以为不一劳者不久佚，不暂费者不永宁，是以忍百万之师以摧饿虎之喙，运府库之财填卢山之壑而不悔也。
——《汉书·匈奴传第六十四下》
庐江郡，故淮南，文南十六年别为国。金兰西北有东陵乡，淮水出。属扬州。庐江出陵阳东南。北入江。户十二万四千三百八十三，口四十五万七千三百三十三。
——《汉书·地理志上》
按卫青本传找不到他曾去过匈奴卢山的记载。
看法二：卫青墓之庐山是匈奴之窴（阗）颜山。
这种说法多是后人附会，强行解释，找不到史据。如果庐山就是阗颜山，那么班固大可以直接写阗颜山，班固不可能不知道阗颜山。
看法三：卫青墓之庐山是指阴山或阴山的某座山峰
这种说法也是后人附会，阴山在汉朝已经是名山，若真是阴山班固没有不直书其名的道理。
虽然阴山和卫青有直接联系，且非常适合旌功：
臣闻北边塞至辽东，外有阴山，东西千余里，草木茂盛，多**，本冒顿单于依阻其中，治作弓矢，来出为寇，是其苑囿也。至孝武世，出师征伐，斥夺此地，攘之于幕北。建塞徼，起亭隧，筑外城，设屯戍以守之，然后边境得用少安。幕北地乎，少草木，多大沙，匈奴来寇，少所蔽隐，从塞以南，径深山谷，往来差难。边长老言匈奴失阴山之后，过之未尝不哭也。
——《汉书·卷九十四下匈奴传第六十四下》
说是阴山山脉的某座山头目前来说找不到任何依据，属于臆测。
看法四：卫青墓之庐山是庐江郡之庐山
这种说法从山名的一致性上来说没有任何问题，全文检索汉书可以发现卫青传之庐山同庐江郡之庐山。
但是这种解释最大的问题是汉武帝为什么要把卫青的墓修成南方的一座山呢？卫青曾经去过这个位于江西九江的庐山吗？
根据《汉书·武帝纪》来看卫青应该于元封五年陪同汉武帝去过庐山，除了作为大臣要参加第二次封禅礼以外，太史公还写下了旁证：
太史公曰：余南登庐山，观禹疏九江（从汉武帝南巡），遂至于会稽太湟，上姑苏，望五湖；东闚洛汭、大邳，迎河，行淮、泗、济、漯洛渠；西瞻蜀之岷山及离碓；北自龙门至于朔方。（从汉武帝十八万北巡朔方）曰：甚哉，水之为利害也！余从负薪塞宣房(从汉武帝治黄河瓠子），悲瓠子之诗而作河渠书。——《史记·河渠书》
五年冬，行南巡狩，至于盛唐，望祀虞舜于九嶷。登灊天柱山，自寻阳浮江，亲射蛟江中，获之。舳舻千里，薄枞阳而出，作《盛唐枞阳之歌》。遂北至琅邪，并海，所过，礼祠其名山大川。——《汉书·武帝纪》
那么如果认为卫青墓之庐山为庐江郡之庐山，有没有合理的解释呢?
这个目前来说没有特别好的解释，值得一提的说法应该是跟汉武帝求神仙礼名山的心理有关，因为庐山仙山之名久矣。
孙放《庐山赋》曰：寻阳郡南有庐山，九江之镇也。临彭蠡之泽，接平敞之原。《开山图》曰：山四方，周四百余里，叠鄣之岩万仞，怀灵抱异，苞诸仙迹。《豫章旧志》曰：庐俗，字君孝，本姓匡，父东野王，共鄱阳令吴芮佐汉定天下而亡。汉封俗于阳，曰越庐君。俗兄弟七人皆好道术，遂寓精于宫庭之山。故世谓之庐山。汉武帝南巡，睹山以为神灵，封俗大明公远法师。《庐山记》曰：殷、周之际，匡俗先生，受道仙人，共游此山，时人谓其所止为神仙之庐，因以名山矣。又按周景式曰：庐山匡俗，字子孝，本东里子，出周武王时，生而神灵，屡逃征聘，庐于此山，时人敬事之。俗后仙化，空庐犹存，弟子睹室悲哀，哭之旦暮，事同乌号。世称庐君，故山取号焉。斯耳传之谈，非实证也。
——《水经注·卷三十九庐江水》
庐山之来由应该和一个叫匡俗的人有关，而且颇多神仙怪谈。如果汉武帝以共同游历的这座“仙山”为卫青作冢，应该是取怀念昔日之情或者取希望卫青薨逝后通于天地神仙之意，毕竟元鼎元封以来刘彻日常沉迷求神仙。