建康赌风极盛，樗蒲、双陆、摊钱，好赌者趋之若鹜，史载桓温少年家贫，却又好赌，赌术不精，负债累累，债主逼债，无处藏身，便求救于以善赌闻名的袁耽袁彦道，袁耽当时还在缌麻服丧，当即脱去丧服，换上便衣就和桓温去了，债主不识袁耽，就局共戏，袁耽投马绝叫，旁若无人，直上百万钱，大获全胜，探布帽掷债主前曰：“汝竟识袁彦道否！”
这个袁耽便是袁曾之父，袁曾亦好赌，是以与诸葛曾共出赌资六十万钱请陈操之与祝英台辩难。