語出《史記．卷一二六．滑稽傳．褚少孫補衛青傳》：「東郭先生久待詔公車，貧困飢寒，衣蔽履不完。……及其拜為二千石，佩青緺……同官待詔者，等比祖道於都門外，榮華道路，立名當世，此所謂衣褐懷寶者也。」後比喻外表樸陋，卻內藏真才。