Бергер вступил в ХДС в 1964 году. С 1983 по 1991 год он был председателем Федерального комитета ХДС по политике безопасности. С 1964 по 1984 год Бергер был членом городского совета Ланштайна, а также членом районного совета Рейн-Лан. Он был членом немецкого Бундестага с 25 октября 1977 года, когда он сменил Альберта Лайхта, до 1980 года и снова с 19 июня 1981 года, когда он сменил Норберта Блюма, который был назначен сенатором Берлина, до 1987 года. Там он был полноправным членом Комитета обороны и Комитета по образованию и науке. Он был членом Парламентских ассамблей Совета Европы и Западноевропейского союза.
Хербст, Людольф; Ян, Бруно (2002). Фирхаус, Рудольф (ред.). Biographisches Handbuch der Mitglieder des Deutschen Bundestages. 1949–2002 [ Биографический справочник депутатов Бундестага Германии. 1949–2002 ] (на немецком языке). München: De Gruyter - De Gruyter Saur. п. 1715. ISBN978-3-11-184511-1.