Født i Bø. Gift med Sigrid Pettersen. Het opprinnelig Kaasa, men tok navnet Solberg etter at han var flyttet til Seljord.
"Atelieret Solberg Indeh. Ø.O.Kaasa Seljord Telemarken" finnes på visittkort-papp (Aasmund Olavson Vinje) i Nasjonalbibliotekets samlinger.
Gikk først i møbelsnekkerlære, var også veiarbeider. Begynte å fotografere på egen hånd som meget ung, gikk i fotograflære i Skien, og hos Carlsen i Christiania. Reiste deretter rundt som fotograf, og startet i 1901 fotografisk forretning i Seljord.
Dro i alle år fremdeles på fotografiske streiftog rundt i Telemark i sommermånedene, og ble kjent under navnet "Telemarksfotografen". Det meste av hans enestående arkiv ble rasert etter hans død, da det ble stående nærmest for vær og vind.