他没有如张柬之等人一样糊里糊涂地成为无谓的牺牲者，也没有像燕钦融一样对牛弹琴般地忠直死谏，而是选择了避让，直到发现值得效力的人才出头，正如《水浒》中的一句话：这一腔血要卖与识货的。姚崇，终于找到了识货的，但眼下他还要再经历一场风波。
羽林军是个很令人挠头的机构，这批军人，几次政变都有参与，保卫皇宫靠他们，争夺政权也靠他们，所以掌握羽林军是至关重要的。李旦令老四李隆范、老五李隆业分别担任羽林军左右卫大将军，以控制禁军，老三李隆基则被立为皇太子，总制禁军左右万骑。
老李家一门都掌握了军权，李旦本以为这样很安全，却怎么也未料到，朝中大臣们有意见了。大臣们认为，李旦这样做是很危险的，因为李旦能上台，无非倚仗二人，即李隆基和太平公主，现在局面刚刚安定，公主和隆基兄的手下都在互相攀比功劳大小，如果两方发生争端，而李隆基的兄弟们都掌握着禁军，则可能会再次发生流血，大臣们这些年见的血太多了，见怕了。
于是大臣们就去见中书令姚崇，姚崇也觉得大臣们的话在理，便向李旦建议，让太平公主带着她的手下去洛阳，让李隆基的兄弟们去外地当刺史，没了权贵争霸，这世界就太平了，京师也就安全了。