出自伊姓。商汤有贤臣伊尹，因为在灭夏过程中功劳最大，商汤封他为尹（宰相），并封了个尊号叫“阿衡”（“阿”就是“倚”，“衡”的意思是“维持”，和气来意思就是“国家的倚靠”）。后来伊尹的后代子孙就以伊尹尊号中的“衡”字命姓，称衡姓。

　　出自姬姓，是周公旦的后代。周公长子伯禽封于鲁，建立鲁国，他的后代有公子衡，其子孙以祖上名字命姓，称衡姓。

　　三国时，曹操于官渡之战打败袁绍，袁绍的几个儿子又自相残杀，袁姓部分族人就逃到湖南衡山隐居避难，以居住地名为姓，改姓衡。