帕特里克出生于美国纽约，祖母是传奇演员杰姬·格里森，父亲是剧作家兼演员杰森·米勒。母亲是琳达·米勒，姐姐叫詹妮弗，兄弟叫乔丹，他还有个同父异母的兄弟，名叫乔舒亚·米勒，是一位演员和作家。帕特里克第一份关于电影的工作是为1982年的冠军锦标赛电影版当制片助理。1993年，他回绝了出演《黑色豪门企业》的主角角色，最后这个角色被汤姆·克鲁斯得到了。2004年回绝了梅尔·吉普森的《耶稣受难记》中耶稣的角色。1990年代初，当他的好友基本·弗·萨瑟兰取消了与朱莉亚·罗伯茨的婚约后，罗伯茨和帕特里克一起跑到了欧洲，最后他们俩人结为了连理。