Ganed George Kelly Barnes ar ddiwedd y 1890au ym Memphis, Tennessee. Roedd ei deulu yn weddol gyfoethog, a bu'n byw bywyd cyffredin nes iddo gofrestru ym Mhrifysgol Talaith Mississippi. Ar y dechrau, dim ond ychydig o drafferth yr oedd, yn ennill graddau gwael ac yn cronni anfanteision. Fodd bynnag, ar ôl cwympo mewn cariad â menyw o'r enw Genefa, penderfynodd roi'r gorau i'r ysgol yn gyfan gwbl. Buan iawn y cawsant eu hunain mewn trafferthion ariannol, felly gwnaeth Kelly gynllun a dechreuodd weithio fel gangster ar ôl gwahanu o Genefa. Ar y pryd, dim ond 19 oed ydoedd.

Ym 1927, syrthiodd i wraig o'r enw Kathryn Thorne, y priododd yn ddiweddarach. Roedd Kathryn Kelly, yn droseddwr yn ei rhinwedd ei hun. Prynodd wn peiriant iddo, a esgorodd ar ei lysenw, “Machine Gun Kelly.”

Roedd ei droseddau’n canolbwyntio’n bennaf ar fanteisio ar gyfreithiau Gwahardd ac ar ladrata o fanciau. Er hynny, herwgipio oedd ei drosedd enwocaf.

Gyda chymorth dyn o'r enw Albert Bates a sgiliau cynllunio ei wraig, bwriad Kelly oedd herwgipio dyn olew o'r enw Charles Urschel. Roeddent wedi bwriadu pridwerthu Urschel am $200,000, ond ar ôl cyrraedd Urschel's, roeddent wedi dod o hyd i ddau ddyn yn lle un, ac wedi cymryd y ddau, yn ansicr pwy oedd pwy. Walter Jarrett oedd y dyn arall.

Ar ôl derbyn y pridwerth, rhyddhawyd Urschel. Gyda chymorth Urschel, daeth yr FBI o hyd i'w ffordd i'r tŷ lle cafodd ei gadw. Yno, fe wnaethon nhw ddarganfodmai Kelly a Bates oedd yr herwgipwyr. Gyda'r cliwiau hyn a'r rhifau cyfresol ar yr arian pridwerth, llwyddasant i ddod o hyd i'r herwgipwyr.

Ar 12 Hydref, 1933, cawsant eu dedfrydau: bywyd yn y carchar. Bu farw Kelly ym 1954. Rhyddhawyd Kathryn ym 1958.