Blant andre har lederen i Stortingets kontrollkomite, Ågot Valla (SV), uttalt seg kritisk til at Ludvigsen ikke vil trekke seg fra Frimurerordenen.
Buvik har vært medlem i over 40 år. Han har i den tiden innehatt sentrale verv, og både sittet på Stortinget, og jobbet som fylkesmann i Troms.
- Jeghar aldri vært i en situasjon der medlemskapet opplevdes som problematisk i forhold til embete, sier Buvik til NRK.
-Politikk og religion er ikke tema
Buvik sier at verken politikk eller religion er tema på frimurer-møtene.
- Det dreier seg kun om personlighetsutviking og utvikling av integritet og etikk. Buvik syntes det er merkelig at Frimurerlosjen til stadighet utsettes for kritikk, mens lignende losjer, som Odd Fellow, er godtatt på en helt annen måte.
Han tror ikke medlemskapet til Ludvigsen kommer til å bli noe problem. Men Buvik sier at dersom det oppstår tvil i enkeltsaker, så kommer nok Ludvigsen til å håndtere det på rett måte.