景宗耶律贤之父耶律阮的兄弟倒有几个：二弟耶律娄国、三弟耶律稍、四弟耶律隆先、五弟耶律道隐。这兄弟四个之中，耶律娄国年纪最长，也算是敢作敢为的。“察割之乱”时，他曾亲手手刃耶律察割等，为其兄耶律阮报了仇。事后，却也迫于形势，不得不与契丹贵族共同拥立太宗嫡长子耶律璟为帝。但他出身长房的这个身份到底让穆宗不可能对他放心。于是，在口头上感谢他的拥立之功的同时，此后却借机明升暗降，将他从手握实权的南京副留守迁升到一个不痛不痒的政事令。于是，穆宗时期，心怀不满的耶律娄国联合同样不满穆宗耶律璟的世宗萧皇后之弟，幽州节度使萧眉骨得联合谋反，但很快事泄，耶律娄国与萧眉骨得俱被穆宗处死。
耶律阮的三弟耶律稍才智平庸，根本不堪大用。四弟平王耶律隆先、五弟晋王耶律道隐虽然有才，但世宗在世的时候，他们年岁不大，未能有所作为。而在穆宗耶律璟一朝，他们作为太祖长房子孙自然又成为穆宗兄弟重点打压和防范的对象，手中掌握的力量有限。
因此，景宗耶律贤在辽国皇族“横帐三房”中的势力远不能与太宗一房想比。甚至，就是与太祖幼子的耶律李胡这一房相比，几乎也没有优势可言。
虽然耶律李胡这一房自始至终，没有一人最后成为了辽国的皇帝（耶律李胡这一房仅有耶律李胡死后被辽景追谥为钦顺皇帝、章肃皇帝），但耶律李胡作为太祖阿保机和述律太后的幼子，根据草原民族“幼子守灶”的传统，他这一房自然继承了辽太祖阿保机和政治女强人述律太后留下的两个庞大的斡鲁朵——宏义宫、长宁宫及其宫分军，势力相当强大。耶律李胡生前虽从未做过哪怕是一天的大辽国皇帝，但在辽太宗耶律德光大举兴兵南征后唐时期，曾遵从其母述律太后之命，让其留守上京，并被耶律德光加封为“天下兵马大元帅”，执掌草原所有兵马，有“皇太弟”之称，俨然有太宗继承人之威风。然而，太宗一朝生死，即位的却是随驾的耶律阮。虽然耶律李胡未能成为辽国皇帝，但耶律李胡却敢在其母述律太后的支持下与已然即位的辽世宗耶律阮相抗衡，其势力已然不可小觑。辽穆宗时期，不甘心帝位数次与自己擦肩而过的耶律李胡与儿子耶律喜隐、耶律宛多次参与谋反，最后父子俱被穆宗囚禁于辽国极边之地。不久，耶律李胡因病死于囚禁之所。耶律贤即位之后，为了缓解穆宗当政时期，朝局混乱，尤其是针对辽国皇族横帐三房内部为争夺皇位关系异常紧张的的现状，大赦天下，耶律喜隐和耶律宛兄弟相继被赦免。这样耶律喜隐、耶律宛兄弟手中便掌握这继承自祖父母的庞大斡鲁朵和宫分军。
