Han etablerte landhandel og tok samtidig navnet Elias Olsen Døscherholmen. Han bygde han også et tranbrenneri og han solgte drivstoff til båtfolket. I 1902 kjøpte han øya. Virksomheten på holmen ble etter hvert utvidet med bl.a. barkeri, fiskemottak og sildesalteri og i 1915 fikk holmen eget brevhus, dette ble i 1920 omgjort til poståpneri. Sønnen Bernt Olsen tok over forretningen i 1912 og drev den frem til han døde i 1937. Etter andre verdenskrig kom det veiforbindelse til Døscherholmen, men det forhindret ikke at næringsvirksomheten i løpet av 60- og 70-tallet måtte avvikles. I nyere tid har det blitt lansert planer om ny bebyggelse på holmen

Foto:Av Cavernia - Eget verk, CC BY-SA 4.0, https://commons.wikimedia.org/w/index.php?curid=43296507