O Puppet Mammy começou originalmente em dezembro de 2003, formado por Diana (vocais), Eruto e Kirua (guitarra), Jyuki (baixo) e Ivu (bateria).
Seu primeiro show aconteceu no dia 9 de fevereiro de 2004, no Nagoya Club Quattro, e foi seguido pelo lançamento de seu primeiro single, Kumo no mushiro. Pouco tempo depois o Puppet Mammy começou a fazer turnês, e, no final de junho, lançou seu primeiro maxi-single, The Mr. Freaks Show.
A banda seguiu em turnê, fazendo alguns shows por mês. Em dezembro aconteceu o lançamento de seu segundo single, Child Terrors, e um two-man com a banda Zeek.
2005 pareceu começar bem com alguns shows, mas, em fevereiro, eles anunciaram que Daina deixaria a banda. Porém, em lugar de procurar por um novo vocalista, o guitarrista Kirua decidiu tomar seu lugar e mudou seu nome para Makoto. Sua voz era bem diferente da de Daina, um pouco mais suave, e, uma vez que Makoto era guitarrista, lhe faltava um pouco de experiência.
Com Makoto nos vocais, o Puppet Mammy lançou o maxi-single Shinjou Shikisai Shuu em junho, e recrutou Kanna, originalmente do DEATHGAZE, como seu novo guitarrista. Infelizmente, no fim do ano, a banda anunciou que se separaria, e fez seu último show no Natal de 2005, no Holiday Nagoya.
