Po rozwodzie rodziców, spowodowanym tyranią ojca, matka chłopca zmieniła imiona GG’ego na Kevin Michael. Początkowo chłopiec miał duże trudności z dostosowaniem się do norm w szkole, przez co wielu jego rówieśników go zaczepiało. Za złe zachowanie Kevin został wydalony ze szkoły i przeniesiony do placówki dla trudnej młodzieży. Później do jednego z klasowych zdjęć przebrał się za dziewczynkę, co nie spodobało się nauczycielom. Jako nastolatek regularnie kradł, włamywał się do domów i samochodów, sprzedawał narkotyki.

GG Allin w The Jabbers Pierwszym znaczącym zespołem GG’ego był The Jabbers, który muzycznie w dużym stopniu nawiązywał do dokonań Iggy’ego Popa, The Clash i Sex Pistols. Jednak GG pod względem swojego zachowania na scenie nawiązywał do Alice Coopera. W tym czasie ożenił się z Sandrą Farrow (6 października 1980 roku) i doczekał się córki. Po urodzeniu się jego córki, GG wziął rozwód w 1986 roku i zaczął spotykać się z nastoletnią dziewczyną.

Współpraca z The Jabbers trwała krótko. Grupa rozpadła się w wyniku konfliktu Allina z resztą muzyków w 1984 roku.