大业十一年的秋天，北方大旱，从河东到关北，再到河西、陇右，处处民生凋敝。整个武威，亦是如此。
  而且武威之地，百姓本来较旁地艰难一些，这次大旱，以致发生人吃人之事。
  李轨作为一国之主，定然不能冷眼旁观。于是李轨尽其家资予以赈济，不过仍不足供给，便商议开仓发粮，曹珍等人也劝他这样做。
  这时原隋官出身的韦士政和谢统师等人便站出来反对。
  韦士政和谢统师都是出身名门，在大隋也是高官，自是看不上土豪出身的李轨。二人虽然投降，只是为了性命，不得已而为之，若是让他们真心为李轨效力，则是难了。
  二人的目的跟安修仁差不多，因此相互勾连。
  在大凉朝中，为了制造混乱，更是引进群胡，结为党羽，排挤用事旧臣，意图离散其众。
  眼看曹珍劝李轨赈灾，韦士政便说道：“百姓饿死者尽是弱而不任事之人，壮勇之士终不为此困顿。况且仓储粮食要备意外之需，岂能胡乱施惠于弱小之人呢？仆射附合下情，怕不是为国考虑，而是只为自己的名声着想。”
  曹珍气得满脸通红，说不出话来。
  李轨耳根子也不硬，这时便看安修仁。安修仁便道：“二位皆说得有理。不过听闻薛举又有心伐我，此时若尽出府库，只恐来年要与暴秦大战，粮储恐不足用也。”
  李轨一听，还是抗击西秦更重要，于是便决定不再赈灾。
  武威郡内无数百姓指望赈灾粮存活，李轨此举立刻引得百姓更加怨恨，不少人都想叛亡而去。
  臣僚离心，百姓怨怼，大凉之势，便渐显颓败。
  内事不顺，外事亦不顺。李轨命其弟李懋率军征讨张掖郡，反为张掖郡兵所败；南下征讨西平郡的军队，也被挡在了雪山。
  折腾了半天，河西大凉国的名头叫得响亮，手中只有一郡。
  李轨眼看诸事不顺，心中烦闷，于是便召集部下商议国策。
  这时韦士政认为，河西之地，不足恃，便希望李轨暂时去王号，并派人前往洛阳，请求朝廷册封。
  大隋现在内忧外患，顾不得河西之地，只要武威归降，大隋必然接受。到时候武威挟大隋之名，攻略诸郡，亦可水到渠成。
  李轨心腹关谨也劝道：“凉州僻远，财力不足，虽有雄兵万余，而土地不过千里，又无险固可守。还与戎狄接壤，戎狄心如豺狼，不与我们同族同类。如今大隋虽动乱，但尚掌握大事，且卫公屯兵河北，每攻必下，每战必胜，河北群盗，不足为虑。如举河西版图东归朝廷，虽是汉代窦融也不足与我们相比。”
  这时曹珍反对道：“自天子南下江都，已失天下。今英雄竞起，称王称帝，瓜分鼎峙。大隋远在中原，我大凉自处河右，相距数千里，何必再接受大隋官职。”
  众人相争，李轨默然不答，过了好一会儿才对关谨等人说道：“从前吴王刘濞统率江左之兵时还称自己为东帝，孤今据有河右，不能称为西帝吗？大隋虽强大，卫公虽善战，能把孤怎么样？汝等不要为隋引诱孤了。”
  关谨大惊失色，立刻自辩，李轨却头也不回地离开了。
  其实归降大隋没什么，只是一个名号问题。只是李轨称王已经习惯了，若是归降大隋，必然要去王号，他着实不舍得这个王号。
  众人散去，安修仁去见李轨。
  安修仁便劝李轨，众人举义，本就是对朝廷不满，如果再次归降朝廷，则人心将散。李轨深以为然，觉得还是安修仁为自己着想。
  这时李轨想起安修仁的兄长安兴贵在长安为官，便问安修仁如何不愿归降朝廷。
  安修仁便说道：“臣闻富贵不居故乡，如衣锦夜行。如今全族子弟蒙受大王信任，怎敢怀有他心！”
  李轨大喜，于是更加对安修仁委以重用，军政大事皆交由安修仁决之，安氏职掌枢密者有数十人。
  至于关谨等一些旧臣，则越发被李轨疏远了。
  安修仁掌握大权之后，便和韦士政、谢统师以及李轨的次子李仲琰等人相互勾连，打压重臣，排斥异己，弄得大凉朝堂之上，乌烟瘴气。
  大业十一年十月，盖援率四千人马从删丹县（今甘肃省山丹县）出发，攻入武威。与安修仁亲近的番和县令在安修仁的安排下，投降盖援。
  盖援所部兵势直逼姑臧，李轨坐不住了，只得命其弟李懋为主将，并以太仆卿谢统师、尚书左丞邓晓二人为副将，率领国中主力前去迎击。
  此时大凉国之兵尽出，而姑臧空虚。
  在安修仁的指引下，西平、居延两路人马，从南北两侧直逼姑臧城下，将姑臧城包围。
  李轨大惊，率领麾下仅有的部队出战，但却不敌，为隋军击败，只得退守城中。
  这时安修仁率人打开城门，引隋军入内。整个城中已尽为安修仁掌握，如是一城皆降。
  李轨侥幸未成为隋军的俘虏，带领几百名心腹，退守内城。
  安修仁带着人兵临城下，大呼道：“卫公派我来取李轨，不服从者罪及三族。”于是城中之人皆不敢动。
  李轨站在城墙之上，见到安修仁便大声呼道：“安修仁，我待你恩重，委以重任，汝何以背叛于我？”
  安修仁乃在城下大声喊道：“李轨，你待我的确很好，但我要为武威百姓计，不得不如此。还有，我从未背叛于你，我一直便是忠于大隋之人。十多年前，我奉卫公之命，前往突厥牙帐为间，历经生死，矢志不渝，当时突厥步迦可汗看重于我，要委我以突厥国相，我尚不曾心动，你以为一个区区逆臣宰相，可以收买于我。”
  众人听了大吃一惊，没想到安修仁还有此等经历。安修仁连突厥可汗都无法收服，背反李轨，也就是必然之事。
  李轨却是知道，事情无可挽回，于是大声感叹道：“我识人不明，以至于此。今人心已失，天亡我啊！”遂携同妻子儿女登上玉女台，置酒告别故国，然后开城向隋军投降。