正直名人袁天罡，谓其骨以量其命。

《旧唐书》中记载的袁天罡最著名的相面传奇故事，就是拜见武则天皇后的运程。当武则天还在襁褓中的时候，袁天罡见到武则天的母亲杨，大吃一惊，说:“妻生贵子！”武则天的母亲把她的两个儿子武和武卖给袁天罡相面。但袁天罡说，他可以用道术做官，但只是个能保家的主儿，不要太贵。

杨还把武则天的妹妹(后来叫韩夫人)叫出来让袁天罡拍照，袁天罡说:“这女人贵，对丈夫不好！”最后保姆拿出武则天穿着男孩子的衣服。袁天罡见到襁褓中的武则天，大吃一惊，说她是“凤颈龙，甚贵考！”但他遗憾地说:“可惜是个男的。如果是女人，那就是世界的主人！”(“如果你是女人，你就无法窥探，然后你就是世界的主宰！历史进程已经被他预言了。

关于袁天罡与李的关系，传说有多种版本:袁天罡是李的师傅，两人都是隋末博学的道士。袁天罡曾在朗州盘龙山前盖房，李仰慕其名已久，于是带着金条远道而来，叩门而拜。另一个传说说，袁天罡和李是老同学的朋友，他们经常聚在一起商量事情，谈论事情。并一起背靠背躺在地板上，一人写一幅画，为后人留下了一本神奇的推算天书《推背图》。但正史并没有记载两者的关系，应该没有什么特殊关系。

在民间传说中，关于袁天罡还有更神奇的故事。最流行的传说是武则天让李和袁天罡为他勘察并选择了墓地中的龙洞。先是李跑了9981天，找到了九丈山龙洞的吉祥土，埋下了一枚铜钱；并让袁出去找找。花了七七四十九天才找到这个地方，于是他从头上扯下一个银簪，插了进去。武则天请人核实他们选择的龙穴吉祥土是否相符。结果他们挖出来的时候，袁天罡的银簪正好插在铜钱的方孔里。人们认为袁天罡是天罡中的智慧之星。