Pochodząca z Milwaukee grupa Violent Femmes może nie jest wymieniana jako ta, która dokonała przełomu w historii muzyki alternatywnej, lecz z całą pewnością jej dokonania na tej niwie muzycznej są nie do przecenienia. Do tej pory rozeszło się na całym świecie blisko 10 milionów płyt Violent Femmes. Pierwsza, zatytułowana tak samo, jak zespół, pochodzi z 1983 roku. Początkowo przyjęto ją z rezerwą, później dotarła do wielu fanów, a osiem lat po premierze panowie z Violent Femmes odebrali za nią platynową płytę. Z "Violent Femmes" pochodzą klasyczne kawałki formacji - "Blister In The Sun", "Kiss Off", "Add It Up", "Gone Daddy Gone".

Za przełomowy w karierze kapeli uznaje się krążek numer dwa, "Hallowed Ground" z 1984 roku. Chociaż główna postać zespołu, Gordon Gano, napisała większość piosenek jeszcze w czasach szkoły średniej, charakteryzowały się one wielką dojrzałością, a także silnymi nawiązaniami do religii. Gościem na płycie jest legendarny jazzman John Zorn. Jego dobry znajomy, Fred Frith, gości z kolei na następnym wydawnictwie w dorobku Violent Femmes, płycie "The Blind Leading The Naked" z 1986 roku. Zespół zaproponował na niej między innymi cover "Children Of The Revolution" T.Rex. Produkcję krążka wziął na siebie Jerry Harrison z Talking Heads. Czwarta płyta w karierze Violent Femmes nosiła tytuł..."3". Ukazała się na początku 1989 roku i była nieco bardziej akustyczna niż dwie wcześniejsze produkcje. Ostatnia pozycja w boxie to materiał "Why Do Birds Sing?", który na rynku pojawił się w 1991 roku. Nieźle radził sobie pochodzący z niego singel "American Music". Zespół zawarł na krążku także cover "Do You Really Want To Hurt Me?" Culture Club.
Violent Femmes nagrali później jeszcze parę krążków, lecz nie były one już na tak dobrym poziomie, jak pięć znajdujących się w boxie. Zespół kilkakrotnie się rozpadał i reaktywował. Po raz ostatni w 2009 roku. Ostatnią studyjną płytę wydał w roku 2000.