祖士衡小时曾有僧相面说：“此儿神骨秀异，他日有名于时，若年过四十当位极人臣。”可惜年39岁卒。
祖士衡博学有文才，杨亿曾对刘筠说：“祖士衡儒学日新，后生可畏也。”
祖士衡举进士后授大理评事，累迁起居舍人知制诰，史馆修撰。