除班婕妤外，班況有三子：班伯、班斿（音由）、班稚。在班伯兄弟一代，班氏家族不僅在政治上顯赫榮耀，而且在文化上也取得重大成就，這個家族的興盛狀況在西漢末期頗為引人矚目。
班伯是班固的大伯祖，少年時期機緣巧合，曾經跟隨西漢末年知名的儒家學者、著名大臣師丹學習《詩經》，成為非常有名的儒生。當時掌握朝政的成帝舅舅大將軍王鳳對他很欣賞喜愛，並且把他推薦給了自己的外甥漢成帝。漢成帝親自召見班伯於宴昵殿，見他容貌非常俊美又器宇軒昂，誦讀詩書抑揚頓挫，講論經典有章有法，頭頭是道，於是當場讓他拜宮中常侍，使他得以隨時出入宮廷在身邊侍奉。當時，剛剛即位的漢成帝還非常喜歡學問，曾經讓著名經學家鄭寬中、張禹在金華殿為其傳授講演《尚書》《論語》，他特意關照讓班伯陪同他一起學習。不久班伯升任奉車都尉，專門掌管皇帝出入乘車的事務。數年後，漢成帝沉迷於醇酒婦人的享樂之中，金華殿講學也漸漸停止。班伯隻能天天同貴族子弟混在一起。那些貴族子弟無心向學，成天鬥雞走狗，無所事事。班伯很討厭這種行屍走肉的生活，於是他數次請求出使匈奴，想到邊疆去建功立業。
河平三年（前26），匈奴單於來長安朝見漢成帝，漢成帝便派遣班伯持使節到塞外去迎接單於。當時定襄郡（今內蒙古和林格爾西北土城子）兩戶豪族因為一些私人恩怨，糾集了宗族奴婢一大群人進攻郡府衙門，殺傷了不少官吏。班伯在途中了解到這一情況，立即向朝廷上報，並且自告奮勇表示願意暫時擔任定襄太守一年。漢成帝便派人飛書正式任命他為定襄太守。班伯剛剛到任就派隨行吏員將當地曾與班家祖上有過交情的世家老伯請到府中，好酒好肉殷勤款待，言必稱晚輩後生，非常謙恭有禮，細致周到。受到班伯款待的長輩都非常感動，見他年紀輕輕，地位高貴，卻不惜屈尊紆貴，都紛紛幫他出謀劃策，建議將鬧事的首惡分子抓起來治罪，恢複邊境的安寧，並且主動報告了相關人員的隱匿藏身之處。班伯對長輩們表達謝意之後，立即召集屬縣各大小官員商議，挑選精兵強將，分工部署，順利將作亂的首惡人員抓捕，又順藤摸瓜查找出了隱藏在其他地方的不法分子，這一過程前後隻用了十餘天。
班伯治理定襄一年的時間裏，政績卓著，人民安居樂業。朝廷又將他征召回京師。班伯在接到調令之後，請求在回京師之前到班家的祖墳去祭拜一下，以盡孝道。漢成帝不僅答應了他的請求，還特別下令讓當地郡縣的所有官員也都去參加他的祭祖活動，以表示對他的獎勵和重視。班伯回到老家之後，集合了班氏的族人，按照親疏遠近都給予了一定的賞賜，花費非常巨大，風光排場盛極一時。當地的人將他這種慎終追遠的舉動視為空前絕後之盛舉，久久不能忘懷，美中不足的是班伯在回京師的途中不幸感染風寒。抵達長安之後，漢成帝晉封他為侍中光祿大夫，給了他非常豐厚的賞賜，還特別批準他在家裏養病。
這段時間正逢許皇後被廢，班婕妤供養東宮，侍者李平為婕妤，趙飛燕為皇後。班伯為了躲避紛爭便長期稱病。時間長了，漢成帝還專門跑出宮去探望班伯。班伯非常惶恐，隻能勉強上朝供事。自從大將軍王鳳去世後，富平侯張放、定陵侯淳於長等開始受到寵幸，如果皇帝微服出行，他們會同坐一輛車，一起握著馬的韁繩；入侍宮中，他們也一同設宴飲酒，與趙飛燕、李平等和班侍中一起狂飲談笑。當時他們乘坐的車帳中放著一張有畫的屏風，上麵畫的是商紂醉靠妲己通宵尋歡圖。漢成帝因為班伯剛被起用，非常敬重他，有一次還專門指著畫問班伯：“商紂無道能到這個地步嗎？”班伯回答說：“尚書》上說‘於是聽用婦人的言語’，哪裏有在朝廷上放縱這樣的行為呢？所謂眾惡歸之，沒有比這更過分的了。”漢成帝說：“如果不是這樣，這張圖畫告誡的又是什麼？”班伯回答道：“商紂沉湎於酒，是微子離他而去的原因；《詩經》《尚書》所誡止的淫亂，其本源都在於酒。”漢成帝長歎一口氣說：“我很久沒有見到班生了，今天又一次聽到了正直的話！”這番話卻惹得張放等人很不高興，過了一會兒，他們這群宵小之徒便借著上廁所為名趁機溜走了。當時，正好王太後長信宮中有使者前來看望成帝，將這些都看在眼裏並且稟報給了太後。
此後，有一天漢成帝去長信宮朝見太後，太後哭泣著說：“你近日麵容消瘦，臉色發黑，身體要注意了啊。班侍中本來是大將軍專門為了你推舉的，你應當對他寵愛有加，能更加親近他才好。這樣，他才能更好地輔佐你，而富平侯這些人應該逐出朝廷。”漢成帝不得已隻能回答道：“是。”車騎將軍王音聽說之後，暗示丞相禦史上書言明富平侯的罪過，漢成帝不得不放逐張放為邊都尉，可不久之後，漢成帝又找機會把張放征召入朝。在這種狀況下，王太後專門給漢成帝寫信說道：“以前所講的尚未見到實效，今日富平侯卻又回到了朝廷，我豈能默然不語？”漢成帝謝罪道：“那我現在執行您的懿旨。”當時，許商為少府，師丹為光祿勳，皇上征引許商、師丹二人為光祿大夫，將班伯升遷為水衡都尉，掌管上林苑並保管皇室財物及負責鑄錢等事宜。班伯和兩位老師一起任侍中，俸祿均為中二千石。漢成帝每每入長信宮朝見太後，班伯經常跟從在後；逢朝中有大事，班伯被派往向公卿大臣宣示漢成帝的意圖。在一段時間內，漢成帝暫時將遊樂宴飲之事拋在腦後，重新學習經書，太後非常高興。丞相翟方進又趁機上書，富平侯張放最終被放逐於朝外。可惜好景不長，不久班伯病故，終年38歲，朝廷上下都覺得非常惋惜。