胡綜自幼喪父，母親帶他到江東避難。孫策領會稽太守時，胡綜十四歲，當門下循行，在吳郡與孫權一起讀書。
孫策遇刺逝世後，孫權任討虜將軍，任命胡綜爲金曹從事，並跟隨討伐黃祖，拜鄂長。孫權任車騎將軍時，駐京口，徵召胡綜任書部，與是儀和徐詳共掌軍政機要事物。劉備兵發白帝城，孫權因現有兵力很少，派胡綜到各縣挑選得六千人，於是設立兩部解煩兵，胡綜與徐詳爲左右部督。
後來，東吳將領晉宗叛吳降魏，魏國任命晉宗爲蘄春太守，多次侵擾長江邊的城鎮。孫權任命胡綜和賀齊襲擊晉宗，最後生擒晉宗，胡綜加官建武中郎將。孫權封吳王時，封胡綜爲亭侯，曾與周魴討伐作亂的將領彭綺。孫權稱帝后，遷都建業，任命胡綜爲侍中，進封都鄉侯，與徐詳兼左右領軍。後來又拜偏將軍，兼任左執法，領辭頌。嘉禾元年(232年)，遼東公孫淵向東吳稱降，孫權主張接納，輔吳將軍張昭大力反對，孫權大怒，胡綜等幫助他們二人和解。
胡綜生性嗜酒，酒後就歡呼縱情，有時推杯換盞，撲打身邊人。孫權愛惜其纔不忍責怪。
自孫權接手江東後，很多誥文、策封任命文書和致鄰國的書函都是出自胡綜之手。胡綜曾建議制定律例，規定地方官擅離職守回家奔喪者處死。
赤烏六年(243年)逝世。兒子胡衝繼承爵位。胡衝性情平和有文才，天紀年間任中書令。
