胡楓是土生土長的廣州人，他1932年1月18日出生在廣州西關，祖籍是在廣州神山，他和黃霑、盧海鵬、許冠文等這些“西關大少”一樣，身上總是散發出一種灑脫，不同的是，胡楓性格比較溫和、斯文，很少會說粵語問候語。

很多人都說感覺胡楓身上有一種說不起的貴氣，對於這點，胡楓也承認是老天爺偏幫自己，他曾透露自己活了幾十歲從來沒有遇到過比較大的煩惱。回顧胡楓的一生，確實有很多令人羨慕的地方，他出生在經營古董珠寶的鉅富家庭，產業遍佈香港、廣州、上海等大城市，解放前舉家大小連同產業全部轉移到了香港。

後來胡楓瞞著家人偷偷參加大成電影公司招聘，一出道就得到公司的力捧，出道拍的第一部作品《男人心》就已經是第一男主角，和他搭檔的女主角更是與紅線女齊名的“花旦王”方豔芬。在七十年代中，胡楓轉戰電視行業，雖然已經和主角無緣，然而擁有良好心態的他即使飾演配角仍然擁有屬於自己的位置。

胡楓擁有五個子女，子子孫孫塞塞一大堆，另外還有14個“契仔契女”， 當中包括黎明、張學友、林憶蓮等天王天后 。如今他雖然年近90，然而仍然灑脫依舊，還不停在紅館、在tvb展示他的“舞王修”本色。就連陳百祥都對胡楓大為佩服，他曾說：“最想見到的就是胡楓和謝賢長命百歲，只要有他們兩位老頑童在，我和阿倫永遠都是年輕人。”