郭德剛神父於1859年來台，在台十年又二個月。他創立了目前的高雄主教座堂、前金堂區、萬金及溝仔墘(今屏東竹田鄉)、老埤堂區(今屏東內埔鄉)、山腳（高雄鼓山）天主堂，及台南教會。是天主教來台開教的代表性神父。他於1869年離台赴菲，1895年在馬尼拉去世，享年六十四歲。1859年郭德剛神父自打狗(高雄)上岸不久，即遭到鳳山知縣將其拘留二日才釋放。十二月下旬，郭神父以龍銀六十二圓買下前金靠海岸的一筆土地(即今玫瑰堂所在地)，用稻桿、茅草、竹管簡單蓋起一間克難式的傳教所。這間小屋就是天主教在台重新開教的發祥地。兩年之後，郭神父才得到其他傳教士的支援。1861年年底，郭神父前往今日屏東縣的萬金庄平埔番社傳教，頗受歡迎。但卻引起當地客家人的疑懼，原住民與客家人當時處於敵對、爭鬥的狀態。1863年，打狗前金玫瑰教堂落成之後，郭神父親往萬金傳教。他抵達萬金後，以六十圓購買了一塊草埔地，(即現今萬金教堂後方，教友住宅地)在這裡建造了一座以土确砌成的第一座教堂，聚眾宣道，奠定萬金教會的基礎。但傳教過程仍遭到阻礙。1863年郭神父從前金往萬金的路途中遭到搶劫而受傷，1864年萬金天主堂遭到仇教人士縱火，原因是教會不捐獻酬神演戲金。另外，於此時才剛設立的溝仔墘教堂(位於前金和萬金之間，為傳教的中途站) 也屢遭破壞。1865年溝仔墘教堂再遭破壞，1866年萬金天主堂再次因不願攤派迎神賽會的費用，讓外教人士不滿而報復。1867年郭德剛神父遭到綁架。儘管傳教困難重重，但郭神父卻仍繼續往府城(台南)發展傳教事業。他花了二百四十圓買了房子，不久即被逐出，最後只能退到府城小東門外設立天主堂和育嬰堂。郭德剛神父也曾嘗試往噶瑪蘭、雞籠傳教，但因成效不大，故而作罷。1869年他奉命離開台灣，十年在臺辛苦經營的傳教事業，為後繼傳教士打下堅實的基礎。