“Shoot’em up, Baby” foi escrita e produzida por Andy Kim em colaboração com o lendário compositor Jeff Barry. A parceria dos dois foi extremamente prolífica e, juntos, eles coescreveram vários sucessos, incluindo o icônico hit “Sugar, Sugar” para a banda virtual The Archies, o que foi fundamental para a carreira de Kim. O som e o título da música se destacam por sua pegada mais agressiva e com uma batida forte, algo que contrasta com o pop mais suave e melódico de seus futuros sucessos, como “Rock Me Gently”. A canção representa uma fase inicial na carreira de Kim, onde ele explorava um estilo mais pop rock antes de se consolidar com baladas românticas e canções mais leves. Embora a letra seja uma balada romântica sobre uma garota, o título “Shoot’em up, Baby” (“Acabe com eles, Baby”) gerou alguma controvérsia por soar violento. Apesar disso, o disco é hoje visto como uma peça notável em sua discografia, mostrando uma faceta menos conhecida do artista.