Şıhçaağa ve Emine'nin oğludur. İlkokul mezunu olan Ağaoğlu, çiftçilikle uğraşmıştır.
1973 yılında Cumhuriyet Halk Partisi'nden 15. dönem Kahramanmaraş milletvekili seçilmiştir.
1973-1977 yılları arasında bir dönem milletvekilliği yapmıştır.
İsmet Ağaoğlu, Türkiye Büyük Millet Meclisi (TBMM) 15. dönem milletvekilleri listesinde yer almaktadır.
Milletvekilliği yaptığı dönemdeki Türkiye siyasi tarihi oldukça hareketlidir.
Evli ve 11 çocuk babasıdır.
11 Temmuz 1999 tarihinde vefat etmiştir.
