在的杭州，是南宋的都城。所以李芾最大的官如同北京市長(cháng)。

也許是因為祖上的清名才做了官，他十分在意為官公正。他為人剛介，什么意思？就是倔！不畏□。他在湖南幾處地方當過(guò)官，作祁陽(yáng)尉時(shí)，賑荒即有聲名；到永州做官時(shí)，有一伙強盜為患，朝廷予以招撫，一年多沒(méi)有攻克。李芾親自與參議鄧帶一千三百人破其巢，將匪首父子擒拿，余黨遂平。他當官的湘潭縣多大家族，常常使以前的縣官束手無(wú)策，李芾到任后，考核戶(hù)籍出查賦稅，不避權貴勢要，賦稅徭役大大平均。他進(jìn)入朝廷，差任德清知縣。適值浙西發(fā)生饑荒，李芾設置保伍賑濟百姓，救活的人數以萬(wàn)計。后來(lái)他遷任主管酒庫所，德清有人煽動(dòng)百姓作亂，百姓蜂起依附，達到幾萬(wàn)人，朝廷派遣李芾討伐，盜賊聽(tīng)說(shuō)李芾來(lái)到，眾人立即潰散回家。他還建造了虎丘書(shū)院，設置學(xué)官，親自制訂學(xué)規來(lái)教育學(xué)生，來(lái)學(xué)院學(xué)習的人很多。

他當臨安府尹時(shí)，正是賈似道當權的階段。那時(shí)前方官事無(wú)論大小首先稟告賈似道才能實(shí)行，唯獨李芾根本不稟問(wèn)，愣是不理賈似道。福王府有逼迫他人致死的，賈似道極力為之營(yíng)救，李芾寫(xiě)信往復辯論，終于把兇手置之于法。李芾曾出去巡視火器具，百姓有人不制作火具，李芾詢(xún)問(wèn)什么原因，說(shuō)：“是賈似道的家人?！崩钴懒⒓磳@人施以杖刑，痛揍一頓。賈似道大怒，指使臺諫大臣黃萬(wàn)石誣陷他犯有貪贓罪，罷免了他的官職。

有人寫(xiě)史，總結李芾，說(shuō)他臨事精細敏悟，jian猾之人不能夠欺騙他。而且精力過(guò)人，從清晨治理公事到傍晚毫無(wú)倦色，晚上通常到半夜才休息，五更時(shí)分又起床處理公事。望見(jiàn)他凜然不可犯，像神明一樣，但他喜好賢能禮遇士人，與他接觸感到溫暖，雖然是一小小優(yōu)點(diǎn)也誠懇獎掖推薦。平生居官清廉，等到被排斥貶官時(shí)，家里沒(méi)有剩余的資產(chǎn)。

當元軍破了宋朝要塞鄂州后，李芾才剛剛被重新起用，任湖南提刑（后代的按察使），主管所屬湖南的司法、刑獄和監察，兼管農桑。當時(shí)郡縣強盜擾亂，李芾命令所部發(fā)動(dòng)民兵自衛，百姓才安定下來(lái)。他知道蒙元進(jìn)逼，號召派遣軍隊，挑選壯士三千人，讓鄉里的武人尹奮忠率領(lǐng)，前往救援朝廷，另外招募民兵集中在衡州做防御的準備。沒(méi)有多久，賈似道在蕪湖兵潰，朝廷恢復了李芾的官職等級，委任他為潭州兼湖南安撫使。當時(shí)湖北州郡都已經(jīng)歸附蒙元，李芾的朋友們勸他不要去上任，還有的說(shuō)：“實(shí)在沒(méi)有辦法，單人前往就行了?！崩钴勒f(shuō)：“吾世受?chē)?，雖廢棄中，猶思所以報者，今幸用我，我以家許國矣！”（我世代受到國家的恩惠，即使是在被廢棄期間我還想著(zhù)如何報國，今天僥幸任用我，我就把家都交給國家吧?。┻@時(shí)的李芾該是個(gè)老人了，因為他的孫子已經(jīng)在準備結婚。接到任命時(shí)，他的女兒剛剛死去，李芾痛哭一場(chǎng)，帶著(zhù)家眷來(lái)到了潭州。

此時(shí)，蒙元的右丞大將阿里海牙的十萬(wàn)大軍已經(jīng)南下，元軍游騎已到湘陰、益陽(yáng)諸縣，潭州守軍早已調赴前線(xiàn)，也大多死在了前線(xiàn)。潭州城內空虛，人心惶惶，一夕數驚。

受命于危難之際，李芾加緊進(jìn)行守城的準備。他緊急召集城內尚能作戰的軍民約三千人，又約請湘西苗民為援，同時(shí)儲備糧食，整修器械，加固城垣，在江中植立柵欄修筑營(yíng)壘，命令劉孝忠統領(lǐng)各軍。吳繼明從湖北來(lái)