Gruppen spiller eget materiale skrevet av William Dillner (gitar, vokal). Sammen med Colin Lilius (kontrabass) og Elias Vistven (gitar) ønsker han å fange lytteren med rolige og fengende låter.
Vilnius henter inspirasjon fra ny amerikana-musikk med gruppen Darling West sentralt som inspirasjonskilde. Med lun og god stemning og såre låter forsøker gruppen å bringe en ro over publikum ved å bringe dem inn i øyeblikket.