Prestsþjónustu hóf hann í Mývatnssveit, er hann vígðist til Skútustaðaprestakalls og þjónaði því 1951-­1952. Var síðan sóknarprestur í Bolungarvík 1952­ 1971 og í Digranesprestakalli í Kópavogi 1971­-1995. Á Bolungarvíkur árunum þjónaði hann jafnframt Staðarprestakalli í Grunnavík og kenndi við barna og unglingaskólann í Bolungarvík.
Þorbergur sat í stjórn Prestafélags Íslands 1978-­1984, formaður um tveggja ára skeið. Hann var kirkjuþingsmaður 1964­-1970 og 1976­-1990.

Foreldrar hans; Kristján Ólafsson, bóndi á Geirastöðum, f. 17. júní 1887, d. 14. maí 1969 og kona hans Ingveldur Guðmundsdóttir, f. 3. nóvember 1893, d. 17. júní 1992.

Systir Þorbergs var;
1) Helga Kristjánsdóttir f. 20.2. 1928, d. 11.5. 1937,
Fóstursystkin
2) Ingveldur Kristjana Þórarinsdóttir f. 7. okt. 1920 - 21. maí 2011. Var á Gili, Hólssókn, N-Ís. 1930. Fósturfor: Kristján Ásgeir Ólafsson og Ingveldur Guðmundsdóttir á Gili. Húsfreyja á Geirastöðum, síðast bús.. í Bolungarvík
3) Sveinn Jónsson f. 13.4. 1931.

Kona hans 16.4.1955; Elín Þorgilsdóttir 24. jan. 1932 - 26. apríl 1999. Húsfreyja. Síðast bús. í Kópavogi.
Börn þeirra;
1) sveinbarn f. 13. janúar 1956, lést 13. janúar 1956.
2) Kristján Ásgeir Þorbergsson lögmaður í Reykjavík, f. 30.mars 1957, kvæntur Hrönn Óskarsdóttur. Þau eiga þrjá syni; 1. Róbert Marel, 2. Óskar, 3. Þorberg Ingva.
3) Helga Þorbergsdóttir hjúkrunarfræðingur í Vík í Mýrdal, f. 26.7. 1959 gift Sigurgeir Má Jenssyni, lækni í Vík, og eiga þau fjögur börn; 1. Harpa Elín Haraldsdóttir, 2. Þorbergur Atli, 3. Margrét Lilja, 4. Ingveldur Anna.
4) Sigurbjörn Ársæll Þorbergsson lögmaður í Reykjavík, f. 28. desember 1964, kvæntur Helgu Loftsdóttur, lögmanni. Þau eiga 2 börn, tvíburana Elínu Sóleyju og Markús Frey.
5) Þorgils Hlynur Þorbergsson guðfræðingur, f. 17.3. 1971, nú nemi í Kennaraháskóla Íslands.