Da Tønsberg Sjømannsforening fikk sitt eget hus fant man det nødvendig å avlaste sittende styre i drift og vedlikehold av bygget ved å etablere noen komiteer. For reparasjoner, vedlikehold etc. av bygget innvendig og utvendig ble det opprettet en HUSKOMITE.
Foreningens planer for bygget omfattet også et SJØFARTSHISTORISK SENTER for Tønsberg. Dette senteret skulle være åpent for publikum og skulle bestå av en skipsfarts -historisk avdeling og en avdeling som skulle omhandle hvalfangsten. Begge avdelingene skulle kun forholde seg til rederier fra Tønsberg. Styret innså fort at arbeidet med å drive dette senteret ville kreve veldig mye arbeid og det ble derfor opprettet en KULTURKOMITE som skulle ta seg av alt som hadde med drift og videre vekst av senteret,
Hoveddelen av byggets innvendige areal er utleid til en restauratør som skal drive en restaurant i 1. etasje og som også disponerer kjøkken, 3 salonger og en stor sal i 2. etasje. Lokalene i 2. etasje blir leid ut til sluttede selskaper og til konferanser etc. Tønsberg Sjømannsforening har sine medlemsmøter og spiseaftener i de samme lokalene.
For å arrangere våre møter, skaffe foredragsholdere osv. ble det opprettet en ARRANGEMENTSKOMITE.
I januar 2023 ble det opprettet en ADMINISTRASJONSKOMITE.
I tillegg til disse komiteene har også foreningen et eget SHANTYKOR på 23 mann, bestående kun av foreningens medlemmer. Dette koret underholder foreningens medlemmer på våre spiseaftener og også alle de som kommer på foreningens årlige Bacalaofest på brygga utenfor vårt bygg Tollboden. I tillegg underholder koret en gang i året beboerne på Trelleborg Bo- og Behandlingshjem. Koret kan også leies til offentlige og private arrangement.
I tillegg til nevnte KOMITEER og SHANTYKORET har foreningen også personer utenom STYRET som tar seg av medlemsregisteret og arkivet vårt. I tillegg har foreningen en referansegruppe på 11 mann i KULTURKOMITEEN. Disse 11 bistår KULTURKOMITEN i saker som deres lange erfaring som seilende og interesse for sjøfartshistorie kan hjelpe med. Som en liten kuriositet kan nevnes at disse 4 i år har en samlet medlemstid i Tønsberg Sjømannsforening på hele 160 år! Dette burde vel tilsi at man trives i vår forening!