颜杲卿虽然打了几个胜仗，但是起兵只有八天，常山周围的防御工事都没修好，兵力又少，怎能敌得过两路叛军！
叛军到了常山城下，颜杲卿派人到太原去求援，但是太原守将王承业不肯出兵。
史思明叛军把常山紧紧围困，颜杲卿带领常山军民拼死抵抗了四天，城里粮食断了，箭也用完了。常山终于陷落在叛军手里。
史思明纵容叛兵杀害一万多常山军民，又把颜杲卿和袁履谦抓起来，押送到洛阳去见安禄山。
安禄山命令兵士把颜杲卿押到跟前，责问颜杲卿：“你本来只是个范阳小官，我把你提拔为太守，为什么反叛我？”
颜杲卿怒气冲冲的骂道：“你只是一个牧羊的小子，国家让你做了三镇节度使，有哪点对不起你？我为国除奸，恨不得斩你的头，叫什么反叛？”
安禄山恼羞成怒，要左右兵士，把颜杲卿和袁履谦，拖到一座桥边的柱子上缚起来，使用残酷的刑罚折磨他们。
颜杲卿神色凛然，一面忍受着酷刑，一面仍旧痛骂安禄山。
叛军兵士用刀割了颜杲卿的舌头，但颜杲卿满口鲜血，还发出含糊的骂声。
袁履谦看到颜杲卿受刑的惨酷情景，气得自己咬碎舌头，连血带舌喷在旁边一个叛将的脸上。
颜杲卿、袁履谦骂不绝口，一直到他们咽气。
颜杲卿从起兵到失败，虽然只有十几天，但是他们的抵抗，拖住了叛军的兵力，为唐王朝调兵遣将争取了时间；他们誓死抵抗的精神，鼓舞了更多的人抗击叛军。
颜杲卿被杀后，河东节度使李光弼，率领步兵和骑兵一万多人、太原弓箭手三千人，出兵井陉关，打退叛军，收复常山。
接着，朔方节度使郭子仪，也带领精兵，到常山和李光弼会合。