不久，孙坚收聚散兵，休整一番后，再次率军北上，到达了梁县阳人（河南平顶山汝州）。董卓派胡轸为大将，带领吕布、华雄等人率领步骑军五千人前去迎战。
此时吕布已经把洛阳周边的陵墓挖掘了个遍，便又清闲了起来，没事就和刁蝉偷情约会，小日子过得既刺激、又舒坦。董卓此时还不知道吕布给他戴了绿帽子，见吕布整天无所事事地闲逛，就派他跟着胡轸出兵了。
董卓让吕布出征，吕布很不情愿，不愿意离开他的刁蝉。又没有办法，谁让他在董卓的屋檐下，不得不低头呀。吕布一路上无精打采，根本就没有心思管理自己的部下。吕布也曾经想提出来，让董卓将刁蝉赏赐给他，但又想到董卓的残暴脾气，几次想开口都又压了回去。
而胡轸则因为性格暴躁而又粗鲁，一路上看见吕布的部下军纪散乱，便当着所有的部下的面指桑骂槐地骂，要斩*一员大将来整肃军纪，使吕布很没有面子。吕布怀恨在心，就想从中作梗，不让胡轸在此战取得胜利。
胡轸率军到达广城时，离阳人城还有几十里路，天色已晚，人困马乏，应当在此驻军，休整一晚后，明天养足精神再去进攻阳人城。而吕布却欺骗胡轸说：“我听说阳人城里的敌人已经逃跑了，再不去追赶就没有机会了。”于是，胡轸就率军连夜进军。
胡轸率军行了半夜，到了阳人城下，才知道城中孙坚的军队不仅没有逃走，防守还很严密。此时，胡轸的军队已经精疲力竭，饥渴困顿，士气低落。将士们刚刚解甲休息，吕布又派人散布谣言说：“大家赶快逃命吧，孙坚的军队攻打过来了。”黑夜中，将士们不知真假，四处乱逃，丢盔卸甲，非常狼狈。
孙坚看到后，心想：“这是怎么回事，不战自乱，真是天助我成功呀！”于是，孙坚率军趁机出城追击，大败胡轸的军队，胡轸全军溃败，连部将华雄也被斩*了。
董卓听说胡轸打了大败仗，气得大发雷霆，又对吕布发了一通脾气，手持的短戟再一次扔向吕布，吕布早就习惯了，又一次身手敏捷地躲过去了。这次，董卓真得想*了吕布，吕布当场下跪，说了很多的好话，费了好大的劲，才让董卓气消了，但由此吕布开始怨恨董卓，又恐怕自己和刁蝉偷情的事情被董卓发现，内心里惶恐不安，更是不敢再提让董卓将刁蝉赏赐给他的事情了。
二月十二日，董卓自封为太师，地位高于各个刘姓诸侯王。并派人前去劝降孙坚，想着将自己的女儿嫁给孙坚，以此拉拢他，但被孙坚严词拒绝了。
不久，孙坚率军抵达大谷关，距离洛阳只有九十里地。董卓亲自率军前去与孙坚交战，被孙坚打得大败，孙坚得以进入了洛阳。
191年四月，董卓被孙坚打败后，来到长安，吕布也跟随董卓来到了长安。
在吕布还没有被重用之前，司徒王允就因为吕布是个勇猛的将才，对他礼遇有加。自从吕布怨恨董卓之后，见到了王允，就对王允诉说了董卓差点*掉他的事情。
当时王允正在与仆射士孙瑞等人密谋除掉董卓，于是便把此事告诉了吕布，让吕布作为内应。吕布有些不忍心，说：“董卓待我像亲生父亲一样，我怎么狠心下手？”王允说：“你姓吕，他姓董，你们本来就没有血肉关系，如今董卓连*害你的心都有了，你怎么还跟他讲父子情分呢？”于是，吕布便答应了王允。
