Vilhelm Storm var født i Arendal som den tredje i barneflokken til hospitalsprest Fredrik Elias Storm, senere sogneprest i Vår Frue kirke i Trondhjem.