По присоединении Крыма к России, хан Шагин-Гирей, потерявший власть, получил обещание императрицы, что он будет получать вознаграждение — определенную ежегодную пенсию.
По неизвестным причинам, уплата этой пенсии была отложена.
Хан заподозрил Григория Александровича в утайке назначенных ему денег, подал жалобу через приближенного к государыне Александра Петровича Ермолова, который поспешил воспользоваться этим случаем, чтобы настроить императрицу против князя, своего бывшего начальника и благодетеля.
Надо заметить, что Ермолов служил в лейб-гвардии Семеновском полку и своею красотою и ловкостью понравился Григорию Александровичу, который взял его к себе в адъютанты и представил ко двору.
Он вскоре сделал блестящую карьеру, получил чин генерал-майора, орден святого Станислава и Белого Орла I степени и звание флигель-адъютанта, за все это обязанный Потемкину, которому и заплатил черной неблагодарностью.
К начатым Ермоловым интригам против светлейшего присоединились все многочисленные его недоброжелатели, и даже успели внушить императрице, что все делаемые им траты совершенно бесполезны, и что даже присоединение Крыма не стоит таких больших жертв.
Григория Александровича расходившиеся доносчики стали даже обвинять в краже.
Императрицу все это чрезвычайно встревожило, она стала выказывать князю холодность и даже косвенно намекала ему на необходимость оправдания.
Но не таков был Потемкин.
Гордый и самолюбивый, он резко и холодно опровергал обвинения и даже отмалчивался.