咸豐時期，收復湖北全省后的咸豐皇帝非常振奮，為犒勞有功人員，他將胡林翼補授為湖北巡撫，加賞頭品頂戴。胡林翼一下子就成了巡撫大吏，實權在握。
但巡撫雖為一省的最高行政長官，而按照清朝的政治制度，地方上的最高行政長官，巡撫之外，尚有總督?？偠焦苘姸矒嶂蚊裾５粼谝皇≈?，同時設有總督、巡撫兩官，二人恰又同城而治的話，往往互相牽制。湖北巡撫駐武昌，而兼轄湖南、湖北二省的湖廣總督也駐武昌。
咸豐皇帝對漢人持有戒心，胡林翼出任湖北巡撫后，他就命滿人官文為湖廣總督，對其實行監視。官、胡兩人家世、經歷、才略、人品大有不同；又在非常時期，分為督撫，同在一城，同辦一事，且所辦之事，多非平時之例行公事，或無章可循，或有章不能循。這樣，雙方發生了許多次沖突，甚至趨于決裂。在當時，卻意味著湘軍集團是否接受監督，清政府控制使用湘軍的方針能否貫徹的問題。如果二人不和，湖北將全部落入官文手中，湖南也將受到官文的控制。這樣不僅兩湖難以成為湘軍集團的地盤和戰略后方，湘軍的進一步發展壯大，也將成為一句空話，而且湘軍現有力量也會受到損害，進而危及兩湖的安全。
在這種情況下，曾國藩致信胡林翼，讓他與官文搞好關系，如不是事關緊要，一定順從，借其威重之名，方能行己之志。胡林翼最終明白官文的地位不能動搖，惟一的辦法是與官文搞好關系，于是就改變了作風，針對官文特點，大施權術，力求既尊重官文欽差大臣和總督的雙重權勢，又不束縛自己的手腳。
攻人先攻心。首先，胡林翼竭力與官文建立個人之間的親密關系。為了湘軍，胡林翼刻意結交湖廣總督官文。官文有個寵妾過生日，卻以正房夫人的名義散帖，準備等來賀的人聚齊后才坦白。這本是官文想給寵妾邀體面的小伎倆。不料一個藩司得知內情，怒不可遏，說：“夫人壽辰，吾儕慶祝，禮也，今乃若此，我朝廷大僚豈能屈膝于賤妾!”當時的封建名份是很重的，夫人可以夫貴妻榮獲得朝廷誥命，有品位，是作為人存在的，妾的地位總不登大雅之堂。該藩司發怒在情理之中，他收回了賀詞。
胡林翼聽后，對官文的這一得體的做法，大加贊譽?？蓜傉f完，他自己卻若無其事地傳“年家眷晚生胡林翼頓首拜”的帖子祝拜官文的寵妾。這時剛剛隨同那藩司要回賀帖的人又隨胡林翼拜覲。一場尷尬的局面化解了，官文的寵妾自然對胡林翼充滿了感激之情。
之后，官文寵妾來拜望胡林翼母親，胡林翼又吩咐以夫人的規格接待，并讓自己的母認其為干女。兩家內眷親密往來，自己也不時拜謁官母；與官文平時私函，略去官場禮義，直呼之為“老兄”、“中堂老兄”。有的記載還說胡林翼與官文結拜為兄弟。
在處理公事上，胡林翼抓實權，堅持按己意埋頭處理軍政事務。而每遇可得美名、邀封賞，如“收城克敵”等事，則推首功于官文，一切報功奏疏亦推官文列名出奏，官文因此累得晉擢，官至大學士。
在奏折信札中極力稱譽官文“寬仁博大”、“仁厚公忠”、“能開誠心，布公道者，惟中堂一人”。
為了安撫官文，胡林翼對官文的貪污不僅視而不問，還每月以鹽厘3000兩，劃作督署公費，實際就是交到官文的私囊了。
在與官文共事的日子里，胡林翼與官文之間雖有矛盾，但胡林翼始終堅持對官文用外圓內方的方針，直到他后來病死。官文對此自然也心中有數，但仍然做了積極的響應。據有史料記載，胡林翼母親來武昌，官文親自帶領文武官員前去迎接。
為官多年的官文心里非常清楚，自己的功勞都是胡林翼所率領的湘軍爭來的。如果胡林翼的地位一動搖，就無人指揮湘軍克敵制勝，他的種種地位和榮譽也就會落空，甚至身家性命也成問題。因此對胡林翼也聽之任之。但是，官文并不是胡林翼的傀儡，正如曾國藩所說，官文“城府甚深，當胡文忠在時，面子極推讓，然占其地步處必力爭，彼此不過敷衍而已，非誠交也”。
官文的愿望不斷得到胡林翼的金錢與名位的滿足，官文自然感激胡林翼而事事信從。于是，胡林翼真的變成了以一人而兼總督巡撫二職，握軍政大權于一身，事事都可按照自己的計劃與想法一一推行，而無人所阻礙。
督撫同心而胡林翼又實操其柄，自然事事皆易于推行。最顯著的成效，一是用人行政方面，皆能依照胡林翼的主張，用賢黜邪，使湖北吏治日有起色；二是在軍事作戰方面，也能依照胡林翼守在境外的辦法，分遣湖北之軍出援湖南、安徽等省。
胡林翼的官職雖為湖北一省的巡撫，實際上卻是在以湖北一省之力，進而謀取收復長江下游地區，影響到個戰局。
胡林翼是湘軍將領中最富有犧牲精神的一位。為了大局，胡林翼沒有爭權奪利，沒有搶著到前線去，而是心甘情愿地做好自己的后勤工作，保證了老巢的安全。為了大局，他甚至還要低頭做人，硬生生把清政府派來監視自己的人發展成了湘軍的盟友，為湘軍贏得了廣闊的空間?？梢哉f，湘軍的主心骨是曾國藩，但功勞最大的卻是胡林翼。
