În 1988 sau 1989 Varg Vikernes a fondat o trupă numită Kalashnikov, care şi-a schimbat ulterior numele în Uruk-Hai, ceea ce înseamnă "neamul orcilor" în graiul negru din Pământul de Mijloc evocat de scrierile lui J. R. R. Tolkien. În 1989 Vikernes a renunţat la aceasta pentru a se alătura formaţiei de death metal Old Funeral. După spusele lui Vikernes, bateristul si basistul trupei Uruk-Hai nu erau nici serioşi, nici talentaţi, ceea ce nu era cazul celor de la Old Funeral (aceştia erau şi membri ai proiectului Amputation, din care a rezultat formaţia de black metal Immortal). Vikernes a fost membru al Old Funeral pentru doi ani, hotărând în 1991 să creeze un proiect solo, care să-i permită să scrie şi să înregistreze "o muzică mult mai personală şi mai originală". Unii consideră însă Burzum ca o variantă ceva mai evoluată a formaţiei Uruk-Hai, deoarece câteva din riffurile specifice acesteia se regăsesc şi în compoziţiile lui Vikernes. Varg intenţiona ca eforturile sale la proiectul Burzum să rămână anonime, aceasta fiind cauza pentru care s-a autointitulat Count Grishnackh.

Muzica de la începuturile Burzum poartă amprenta scrierilor lui Tolkien. De exemplu, numele Count Grishnackh este luat de la un personaj orc pe nume Grishnákh prezent în trilogia Stăpânul inelelor. Alegerea numelui pentru proiect reflectă atât această influenţă cât şi dorinţa de a rămâne în anonimat. "Burzum" este un cuvânt din graiul negru din Mordor, care înseamnă "întuneric" (acesta se regăseşte şi pe inscripţia de pe Inelul Suprem). Câteva din primele melodii Burzum aveau titluri precum "En Ring Til Å Herske" ("Un inel care să stăpânească"); Vikernes susţinea însă că acest titlu se referea la Rheingold, din mitologia scandinavă. Pe măsură realizării altor albume, atracţia lui Vikernes faţă de mitologia scandinavă şi credinţele păgâne a devenit tot mai evidentă. O mare parte din ultimele creaţii Burzum au la bază legende scandinave, în special ultimele două albume, Dauði Baldrs (legat exclusiv de legenda morţii lui Baldr) şi Hliðskjálf (care prezintă moartea lui Wotan şi sosirea Ragnarokului).

Din punct de vedere muzical, Burzum a progresat de la un black metal primar, primitiv, la o muzică ambientală caracterizată de tendinţe minimaliste şi o atmosferă întunecată. În general se consideră că muzica lui Vikernes e caracterizată de repetiţii hipnotice şi structuri simple, dar profunde. Această sonoritate specifică a fost prezentă în toate albumele sale, indiferent de stilul muzical adoptat. Vikernes a descris Burzum ca pe un soi de "vrajă" sau recreere a unei lumi imaginare, înrădăcinată în istoria păgână. Fiecare album, susţine el, a fost creat ca o "vrajă" în sine, cu fiecare melodie de început intenţionând să facă ascultătorul mai receptiv la "magie", următoarele piese inspirând "o stare mentală asemănătoare transei", iar ultimul cântec să aducă ascultătorul într-o "lume a fanteziei". Vikernes susţine că intenţia de a crea această lume îşi avea izvorul în nemulţumirea faţă de lumea reală.
La momentul de faţă Varg Vikernes este închis pentru uciderea fostului său prieten şi coleg de trupă, Øystein Aarseth (Euronymous de la Mayhem) şi pentru incendierea unor străvechi biserici norvegiene. Vikernes este suspectat că ar fi luat parte şi la alte infracţiuni şi că la momentul arestării sale plănuia distrugerea unei alte biserici (poliţia a găsit 100 kg de explozibili la domiciliul său). În 2004 a încercat să evadeze, dar a fost găsit după câteva zile conducând o maşină furată şi având asupra sa o armă şi un paşaport fals. Mai târziu s-a descoperit că plănuia să fugă în Franţa, de unde să se înroleze în Legiunea Străină, pentru a scăpa astfel de eventualele răzbunări de după eliberarea sa.

Vikernes este fost membru al grupurilor de extremă dreapta "Hvit Arisk Motstand" ("Rezistenţa arienilor albi") şi "Norsk Hedenske Front" ("Frontul păgân norvegian"). El şi-a exprimat interesul faţă de neonazism şi a scris câteva cărţi referitoare la viziunea sa asupra lumii. Cu toate acestea, Vikernes nu şi-a exprimat convingerile naţional-socialiste în muzica Burzum.

În închisoare Vikernes a înregistrat două albume Burzum: Dauði Baldrs şi Hliðskjálf. Ambele albume au la bază doar claviatura şi - în opinia lui Vikernes - nu au de-a face cu genul black metal. Albumul Filosofem din 1996 a fost pus în vânzare după închiderea lui Vikernes. Pe durata încarcerării Vikernes a susţinut mult timp că a renunţat la black metal şi la muzica metal în general, dar un interviu recent sugerează că, în eventualitatea unei eliberări condiţionate în 2006, el va continua cu Burzum în acelaşi stil ca şi pe primele patru albume. Totuşi, el susţine că detestă cultura heavy metal şi latura "sex, droguri şi rock'n'roll" a acesteia.

Deşi Varg Vikernes admite că îi displac originile "ne-ariene" ale muzicii metal, el dezminte zvonurile cum că acestea ar fi motivul pentru care muzica lui a devenit mai ambientală şi mai puţin bazată pe chitară. Această schimbare a avut loc mai degrabă din cauza interdicţiilor de a avea anumite instrumente şi echipamente în celula sa. De asemenea, el nu îşi urăşte creaţiile sale de la începuturi, Hvis Lyset Tar Oss fiind albumul său favorit.

Piesa Dunkelheit de pe albumul Filosofem a avut parte de un videoclip experimental de opt minute, realizat de către britanicul David Palser, care a folosit imagini cu peisaje norvegiene, combinate cu un poem runic. Astfel a rezultat ceea ce unii au numit "videoclipul cel mai pur black metal".