当然，出身后族的萧海只之所以在耶律贤即位之后立即得到重用，还有很重要的一个原因，那就是在辽太祖耶律阿保机嫡系后裔的“横帐”三房中，作为出身太祖长房耶律倍后裔的耶律贤，势力单薄，不仅远不及作为太祖次子耶律德光后裔的这一房，即使是与作为太祖与述律太后三子的耶律李胡这一房相比较，也是大为不如。
在景宗耶律贤之前，辽国的四位皇帝中，长房耶律倍系只有世宗耶律阮一人，而耶律德光一房却出了两位：太宗耶律德光和穆宗耶律璟，这也就意味着，作为世宗嫡子的耶律贤在即位之前直接能够继承和掌握的的势力只有属于世宗的斡鲁朵——积庆宫及其宫分军，而太宗一房却能够继承太宗、穆宗两位皇帝的斡鲁朵——永兴宫、延昌宫及其宫分军。根据辽国斡鲁朵制度，各斡鲁朵共有正户八万户，蕃汉转户十二万四千户，合计共二十万四千户，丁口超过四十万。若按两丁抽一组成宫分军，则有二十万；若按四丁抽一组成骑军，则有骑兵十万。由此，可见两者的差距。
况且，辽世宗耶律阮在位的时间不过区区四年，其影响力远远不能与在位长达二十年之久的辽太宗，甚至是在位十九年的辽穆宗相比。在穆宗死后，虽其无子，但其父耶律德光还有三子太平王（后改封齐王）耶律庵撒葛（辽太宗次子耶律天德在世宗时因谋反被诛杀），四子冀王耶律敌烈，五子越王耶律必摄。而世宗耶律阮虽也有三子三女，然除与甑后所出的嫡三子耶律贤外，与萧后所出的嫡长子吼阿不里五岁即死于“察割之乱”，皇三子耶律只没因年岁太小留在上京而幸免。这耶律只没在穆宗时期却因与穆宗宫帐的中的一名宫女有染，被穆宗施以宫刑，几成废人。至于耶律阮的三个姐妹胡古典、观早、撒剌皆已嫁入后族。因此作为世宗嫡系后裔，耶律贤虽说不上就是孤家寡人，但放眼皇族横帐三房，却也是势单力孤。
