公元1759年的一次战役中，大小和卓木被清军击败。而他后宫的香妃也被兆惠俘虏被带回了京城。兆惠为了讨好大清朝乾隆皇帝，就把身体有异香的香妃献入宫中，打算献给乾隆。

乾隆见到了香妃本人“玉容未近，芳气袭来，既不是花香，又不是粉香，是有一种独特的奇芳异馥，让人心脾。临近御台，更是柳眉微蹙，杏脸含晕，益发起人怜爱。”

不过宫中的太监们叫她向乾隆皇帝行礼时，她却不理不睬，只是一边流着眼泪。”这时身边的近臣向乾隆耳语，说香妃刚刚从叛乱的部落俘来，心里或许还有一丝丝悲痛，而且她是来自新疆，也不太熟习宫中的规矩，皇上可以先将她的饮食起居按回疆的习俗来布置，再派几个回疆部落的仆人伺候她，时间久了，她习惯了，就好了。

乾隆听了之后，果断采取了这位近臣的意见，就让人在西宫给香妃建筑宝月楼寓居，并且对她恩宠有加。但是，香妃却由于长时间思念故乡，整天抱着新疆带去的沙枣花，暗自垂泪。

后来呢，乾隆皇帝带着香妃到江南游山玩水散心，到了杭州的时分，乾隆企图想强行占有香妃，香妃情急之下，取出一柄倒光闪闪匕首来，想要刺杀乾隆，乾隆当时也是吓了一跳，从此再也不敢强迫香妃。可是后来这件事情传到了慈宁宫皇太后的耳中，皇太后恐怕乾隆被香妃所害，就趁着乾隆外出游玩的机遇，将香妃召入宫中，逼迫她自尽了。

乾隆回宫之后，看到香妃已经被他母后赐死了，伤心的大哭了一番。后来，因怀念香妃又让宫廷画家，意大利人郎士宁所画，依照香妃生前的样子画了一幅“香妃戎装像”挂在宫中。思恋时，便看上一看。

香妃死之前曾有遗言。依照香妃的遗言，派图尔都的妻子将香妃的遗体护送回新疆，一行人在路上陪着灵柩整整走了3年才抵达香妃的故乡喀什，后来香妃被安葬在阿帕霍加墓内。这座墓后来就被当地的人们香妃墓。

香妃故土的人民为了留念香妃，就为她在喀什噶尔回城北面的香妃墓左近为她修建了一座香娘娘庙。听说香娘娘庙很有灵验，当地的维吾尔族的年青姑娘们都经常到此祭拜，所求之事没有不应。1892年，萧雄在本人的《西域杂述诗》一书中用诗记载了这个史实。

在他的这本书中记载了这首诗：庙貌巍峨水绕廊，纷繁女伴谒香娘。抒诚泣捧金蟾锁，密祷心中愿未偿。 同时，在这首诗的注里面，他还写道“香娘娘，乾隆年间喀什噶尔人，降生非凡，体有香气，性真笃，因恋母，归没于母家。”但始终是并没有提到香妃娘娘传说中的故事。