▲潘若迪从小接受爸爸的军事教育
潘若迪以健身教练之姿令许多人印象深刻，不过他的陆军上将父亲却曾非常反对儿子学舞，不只在路上遇见装不认识，就连夺下全亚洲有氧老师第一名，爸爸也只说「你有什么了不起」，不过转身却骄傲地向邻居传递好消息，因此从小对父亲的感情相当复杂，但随著年龄增长，他渐渐能了解爸爸的立场。
据报导，潘若迪从小接受父亲军事教育，身为独生子，爸爸管教严厉，曾因为数学只考2分，竟被爸爸用枪抵著头大骂王八蛋，「我爸说不枪毙我就对不起国家」，之后被送到军校当兵，虽然苦但他却为能够脱离爸爸掌控而暗自庆幸。
在集合准备进军校当天，潘若迪早早就到车站等车，远远看到父亲拎著牛皮纸袋走来，爸爸一扔把纸袋甩在他脸上，一打开里面有张写在宣纸上的毛笔字，还有这辈子爸爸唯一给过的零用钱500元，他才终于体会到原来这就是父亲对儿子表达关爱的方式，「他不知道如何教育下一代，所以用他带兵的方式来带我」。
▲潘若迪一家人
在爸爸严格的管教下，潘若迪个性也变得坚强有韧性，和父亲之间的关系也持续改善，遇到不如意的事，会想回台东老家，他说只要坐在爸爸身边，「心就会定下来」，现在的他虽然依旧不能认同父亲的教育模式，但多亏了对方的严厉才没有走偏，老爸如今90岁了，他只希望爸爸能健康、安稳地过日子。
