陶侃平定了苏峻的叛乱以后，东晋王朝暂时获得了安定的局面。这时候，北边却乱了起来。

后赵国主石虎（石勒儿子）死了以后，内部发生大乱，后赵大将冉闵称帝，建立了魏国，历史上称为冉魏；鲜卑族贵族慕容皝（音ｈｕǎｎｇ）建立的前燕又灭了冉魏。公元３５２年，氏族贵族苻健也乘机占领了关中，建立了前秦。

后赵灭亡的时候，东晋的将军桓温向晋穆帝（东晋的第五个皇帝）上书，要求带兵北伐。桓温是个很有军事才能的人，他在当荆州刺史的时候，曾经进兵蜀地，灭掉了成汉，给东晋王朝立了大功。

但是东晋王朝内部矛盾很大。晋穆帝表面上提升了桓温的职位，实际上又猜忌他。桓温要求北伐，晋穆帝没有同意，却另派了一个殷浩带兵北伐。

殷浩是个只有虚名、没有军事才能的文人。他出兵到洛阳，被羌族人打得大败，死伤了一万多人马，连粮草武器也丢光了。

桓温又上了道奏章，要求朝廷把殷浩撤职办罪。晋穆帝没办法，只好把殷浩撤了职，同意桓温带兵北伐。

公元３５４年，桓温统率晋军四万，从江陵出发，分兵三路，进攻长安。前秦国主苻健派兵五万在峣关抵抗，被晋军打得落花流水。苻健只好带了六千名老弱残兵，逃回长安，挖了深沟坚守。

桓温胜利进军，到了灞上。长安附近的郡县官员纷纷向晋军投降。桓温发出告示，要百姓安居乐业。百姓欢天喜地，都牵了牛，备了酒，到军营慰劳。

自从西晋灭亡以后，北方百姓受尽混战的痛苦。他们看到桓温的晋军，都高兴地流着眼泪说：“想不到今天还能够重新见到晋军。”

桓温驻兵灞上，想等关中麦子熟了的时候，派兵士抢收麦子，补充军粮。可苻健也厉害，他料到桓温的打算，就把没有成熟的麦子全部割光，叫桓温收不到一粒麦子。