胤禛和胤祥早年的关系，虽然没有太多史料可寻，但可以肯定兄弟俩是亲密无间的。雍正给胤祥的祭文中提到胤祥的算学由他亲自教授，“忆昔幼龄，趋侍庭闱，晨夕聚处。比长，遵奉皇考之命，授弟算学，日事讨论”，每逢塞外扈从，兄弟俩“形影相依”。当康熙帝出巡只带他们其中一个扈从时，即使短暂分别，两兄弟也会诗书往还。雍正还把他和十三弟唱和的诗作收在诗文集中，使胤祥的少数作品得以传世。
康熙四十七年（1708年）后，胤祥受到了第一次废太子事件的波及，被短暂的囚禁了一段时间（康熙四十七年至康熙四十八年），废掉太子胤礽后康熙帝对诸皇子信任大减，从康熙四十八年（1709年）这次随扈开始采用轮班制，每个人都要轮流陪伴康熙帝出巡，以免结党营私，许多皇子因此都陪同了康熙帝进行巡视，但是胤祥是特殊的。康熙帝的轮班制似乎并没有用到胤祥身上。从康熙四十八年（1709年）实行轮班制开始到康熙五十年（1711年），胤祥每次依然作为皇子陪驾，但是在这一时期康熙帝却并不怎么喜欢胤祥。
从康熙五十年（1711 年）开始，根据能够找到的些许记载，胤祥至少在这一时期是身体出现了问题，胤祥腿部生了一种毒疮，并且“起白泡，破后成疮，时流稀脓水”。康熙帝在回复胤祉奏折当中也问询到 “胤祥疮如何了？”“看起来并不好啊？”等一系列关心慰问的语句。胤禛也曾为胤祥遍访名医，并交代总督鄂尔泰“若知有精于医理之人，可资送来京，以为调摄颐养之助”。胤祥的病其实直到雍正二年（1737年）也没有完全好，雍正帝曾对年羹尧说：“王（胤祥）今春夏只觉瘦弱”。由此可见，胤祥的身体状况是极其糟糕的。所以直到康熙帝逝世，胤祥也没有得到什么机会的一种原因吧。胤祥在康熙一朝可谓经历了大起大落，有过辉煌，更有过落寞。康熙前期胤祥得到了开阔眼界的机会，在康熙后期胤祥更是在长期的压抑当中磨砺了自己的性情，胤祥在康熙朝受到挫折抑制后，对政治权力的残酷有所认识。因此，胤祥在康熙朝虽然处境并不是一帆风顺的，但却为日后在雍正朝的有所作为打下了坚实的基础。
胤祥和胤禛兄弟两不仅在政治方向上保持高度一致，在审美情趣上也有很多共同之处。作为雍正帝最信赖的兄弟，胤祥从皇兄那里获得了诸多的恩宠和荣耀。雍正元年（1723年），雍正帝传旨按康熙年间分封皇子为亲王之例，赐给钱粮23万两。胤祥百般谦退，经皇帝再三宣谕，只收下13万两。雍正帝又援引康熙帝对待其兄裕亲王福全成例，准许胤祥分封后可支用官物6年，胤祥仍是辞谢。尽管胤祥对于皇兄的恩赐总是竭力推辞，他还是得到了许多相同地位的人不曾享有的殊荣。根据皇帝旨意，原来只归他兼管的佐领人丁全部划归怡亲王府属下，又于亲王定额之外增加一、二、三等护卫共17员，仪仗中也增加豹尾枪、长杆刀各二，以突出他的与众不同。雍正三年（1725年）二月，又以胤祥“总理事务谨慎忠诚，从优议叙”，特在亲王之外又加封一个郡王爵位，允许他在儿子中任意指封一人，这在清代历史上是没有先例的，胤祥坚辞不受，胤禛也不好十分勉强，遂命给他增加俸银10000两，以为奖励。以上这些事例，既体现雍正皇帝对爱弟的格外恩遇，被雍正称为“柱石贤弟”。
历史评价
雍正帝：“自古无此公忠体国之贤王”。“朕弟怡贤亲王，天资高卓，颖悟绝伦。如礼乐射御书数之属，一经肄习，无不精妙入神，为人所莫及。而王自谦学力不充，总未存稿。是以王仙逝后，邸中竟无留存者”。“（胤祥）赞襄于密勿之地者，八年有如一日，王之懿德美行，从不欲表著于人，而人亦无从尽知之。”
清代治水专家陈仪评价：计惟水利营田，为吾王未竣之业，亦吾王未释之心，某等自兹以往，遵奉成模，罔敢失坠，仰成遗志，罔敢怠遑，殚力竭诚，如王之在，冀以稍酬恩遇于万一。然亦望吾王牖而咨之，默而佑之，神爽匪遥，梦寐之间，或庶几一遇也。呜呼，通哉，抚今追昔，肝摧肠绝，挥泪陈辞，惟吾王鉴之。
乾隆帝：怡贤亲王公忠体国，其爵位亦应世袭罔替。
传教士宋君荣的书信里说：“这位十三世子很尊重欧洲宗教和人士，特别是对巴多明神父特别宠爱。但他从来不想得到该神父自愿表示为他写的宗教书和鞑靼文著作。”
刘小萌：在康熙晚期，胤禛、胤祥是一对难兄难弟，到雍正朝，则成为密迩无间的君臣。雍正帝为君，给胤祥的宠荣无以复加；胤祥为臣，对胤禛“鞠躬尽瘁，死而后已”。两者珠联璧合，相得益彰，在将清王朝统治推向昌盛的同时，也塑造出一种明君贤相的理想关系。
