南宋开国皇帝宋高宗赵构仅有一个皇子，叫赵旉[fū]，三岁时不幸夭亡。
《朝野遗纪》记载：宋高宗赵构在扬州的皇宫正在临幸嫔妃，殿中侍御史张浚忽然闯进来告变，声称金兵南下，就要打到扬州了。
宋高宗受到了惊吓，此后丧失了生育能力，任后宫佳丽无数，再也没有生育一儿半女。
赵构因此远离女色，这倒成全了他，成为宋朝最长寿的皇帝，在位三十五年，活了八十一岁。
宋高宗没有自己的亲生儿子，不得不考虑在宗室子弟中选择皇位继承人，在其母亲韦太后及部分大臣的劝说下，从宋太祖赵匡胤的后裔中选择皇储。
赵构子侄为“伯”字辈，大臣们就在“伯”字辈宗室里挑选了十个七岁以下的男孩，入朝后进一步精选。
最终确定了两个人选——赵伯玖、赵伯琮，他们都进入皇宫，成为高宗皇帝的养子。
《宋史》记载：赵伯玖，字润夫，宋太祖赵匡胤七世孙，秉义郎赵子彦之子，自幼聪慧，因生来肥壮，有所谓的帝王之相，入宫后颇为宋高宗喜爱，赐名为“璩”。
赵伯玖由吴才人抚养，初任节度使，受封吴国公，后改封崇国公、恩平郡王。
绍兴二十二年（1152年），赵伯玖的生身父亲病逝，他辞官回家守孝，服丧期满，官复原职。
绍兴三十二年（1162年）五月廿八日，宋高宗立另一个养子——普安郡王赵伯琮为皇太子，加恩赵伯玖为皇侄。
赵伯琮也是太祖皇帝的七世孙，赵德昭直系后裔。
六月，宋高宗御笔赐名“玮”，字“元永”，不久禅位给赵玮，即宋孝宗，更名“昚”，任命赵伯玖为开府仪同三司，判大宗正事。
当初，赵伯玖和赵伯琮同为郡王，“礼制相等夷，号东、西府”，这期间发生了什么，让原本喜欢赵伯玖的宋高宗改变了主意呢？
《挥尘录》记载：宋高宗召两个养子谈话，在考虑立谁为继承人的时候，正巧有一只猫路过，赵伯琮专注于皇帝的问话，没有去看那只猫，而赵伯玖却一脚将猫踢出去老远。
宋高宗对赵伯玖开始反感，认为这孩子轻佻而狂妄，不适合做储君，此后转而中意瘦一点的养子赵伯琮。
为了进一步考验两个养子，宋高宗竟别出心裁，分别给两个养子各赏赐十个美丽的处女。
过了一段时间后，宋高宗命宫人查验，结果，赐给赵伯玖的十个美女已然不是处子之身，而赐给赵伯琮的十个美女依然是处女。
宋高宗认为不好色的赵伯琮更适合做为自己的接班人，最终，赵伯琮胜出，成为南宋第二任皇帝，史称宋孝宗。