Так говорят о человеке придурковатом или о том, кто приобрёл с детских лет какие-нибудь пороки, недостатки.
Выражение перешло в речь из комедии «Ревизор» (1836) Николая Васильевича Гоголя (1809 — 1852).
В первом действии комедии судья Аммос Фёдорович Ляпкин-Тяпкин говорит о пьянице-лекаре Христиане Ивановиче Ги́бнере: 
Поро́к — нравственный, духовный недостаток, отрицательное моральное качество человека. В наши дни пороком может называться привычка совершать мелкие проступки (опаздывать на работу, пьянствовать, мусорить, ругаться).