人们一直看到的、印象最深的“太极图”，就是两条黑白的“阴阳鱼”。白鱼表示为阳，黑鱼表示为阴。白鱼中间一黑眼睛，黑鱼之中一白眼睛，表示阳中有阴，阴中有阳之理。
一般所谓“阴阳鱼的太极图”，最先见于明初赵撝谦的《六书本义》，称作“天地自然河图”。其后，章潢收入《图书编》，并更名为“古太极图”。至清初高雪君编篡《易经来注图解》时，把进一步演变而来的《心易发微伏羲太极之图》辑入卷末“周易采图”。
对于 “阴阳鱼的太极图”的来源，清代张惠言于《易图条辨》中说得很清楚。他说：“为此图者，盖由朱子发《纳甲之图》，用周元公《太极（图）》之法，圆而入之。”
