Den 2 oktober 1953 finns i tidningen Smålänningen en bild på Skeens herrgård i Annestad. Den måste flyttas då Sydkraft ska bygga ett kraftverk i Bolmån och området där herrgården står kommer att läggas under vatten.
Sydkraft skänker bort byggnaden som dock måste monteras ner och återuppbyggas. Exteriört får byggnaden inte ändras men invändigt får man fria händer.
Namnet på byggnaden ska vara Skeensgården för att påminna om ursprunget.
En väl tilltagen tomt i Vivljunga skänks till hembygdsföreningen för kommande placering av herrgården.
Nedmontering påbörjas omgående, byggnadslov från kommunen och uppbyggnaden kunde påbörjas.
Efter ett tag kom ett dråpslag. Bygget stoppas av en tjänsteman från Växjö. Man hade börjat arbetet utan igångsättningstillstånd. Dagen då tjänstemannen kom berättas det att det fanns 24 frivilliga på byggarbetsplatsen, bl.a. en svensk-amerikansk hemvändare som var byggmästare och var en stor tillgång som organisatör och ledare för arbetet.
Efter några veckor kom så igångsättningstillståndet och arbetet kunde återupptas.
Frivilliga arbetstimmar beräknas till 10 000.
År 1959 började man använda samlingslokalerna men invigningen dröjde till sommaren 1961 som förrättades av landshövdingen i Kronoberg.