不適合穿老爹鞋的人群主要包括：
個子矮小的人。老爹鞋的外觀較為臃腫，可能會使腳部顯得更加突出，從而讓個子看起來更矮。
腿部較短的人。老爹鞋的「體型」較大，容易顯得腿部更短，不協調。
腿部過細或過粗的人。腿部過細的人穿老爹鞋可能會顯得腿部更細，而腿部過粗的人穿老爹鞋可能會顯得更臃腫。
腿部線條不直的人。老爹鞋的笨重和臃腫可能會暴露腿型的缺陷。
腳部有傷的人。老爹鞋較厚實，可能不適合有腳部損傷的人。
身材較胖的人。老爹鞋的版型寬鬆肥大，可能不適合微胖體型的人。
小腿粗壯的人。老爹鞋可能不適合小腿粗壯的人，可能會暴露腿部線條不明顯的缺點。
皮膚敏感的人。某些人可能對特定材質敏感，選擇時應考慮材質是否適合自己的膚質。
運動能力較差的人。老爹鞋需要較強的腳部承擔能力，對於長期穿高跟鞋或運動鞋的人來說可能不適合。
風格偏向精緻的人。老爹鞋的設計可能不符合某些人的時尚品味，可能不適合那些追求精緻和時尚的人。