文信侯吕不韦被赶回河南的封地后，逐渐淡出了秦国的政坛。
虽然解除了宰相的职务，但他的封地没有被收回，依然是一方诸侯，按理，安心在家颐养天年，后半辈子倒是没有什么问题，可他想消停消停，却有人不肯放过他，是谁？是六国的君主！
吕不韦是个商人不假，但在秦国从政十多年，已经成为了一名经验丰富的政治家，并积累了非常丰富的人脉关系，这种不可多得的人才哪个国家都想巴结和争取。于是，在他回河南封地的那段日子，各国的使者络绎不绝，纷纷对他表示慰问，有的甚至盛情邀请他出访或担任重要职务，可都被吕不韦一一委婉拒绝了。
其实，吕不韦非常清楚，各诸侯国这么给面子，无非一个目的：大家都认为他是秦王嬴政的亲生父亲，按理儿子是不会杀亲生父亲的，他迟早会受到重用，即使不受到重用，如果能邀请他到本国任职，秦国便会投鼠忌器，不会那么快来攻打自己的国家。
吕不韦之所以回绝这些国家的邀请，一方面是看透了这些国家的用意，另一方面还是希望嬴政某天会回心转意将他迎回朝廷，谋求东山再起。
可愿望是美好的，现实却是残酷。当各国使者络绎不绝地前往慰问吕不韦的消息传回都城后，却引起了一个人的注意，这个人便是昌平君。
自从吕不韦被免去宰相一职后，昌平君如愿地坐上了那把梦寐以求的大交椅，成为一人之下万人之上的秦国第二把手。不过，美中不足的是，秦王并没有像处理嫪毐那样，置他于死地，而是将他赶回封地，这让昌平君很不放心：如果有朝一日秦王改变主意了，重新启用吕不韦，自己岂不是白忙活了？刚好这几天他听到了各国使者慰问吕不韦这个消息，不禁大喜过望，自己正愁着没有机会踩他几脚，不想他自己竟送上门来，这不正应了那句“不作死便不会死”的老话么？
第二天上朝，昌平君便急不可耐地参了吕不韦一本：“听说文信侯回到封地后，并没有好好反省，而是大宴各国使者，依老臣看，其并不安份，大王应及早防备才对。”
秦王嬴政一听，不禁勃然大怒：“难道食邑十万户还满足不了他的胃口，还想造反不成？”
自从秦王从赵太后的口中得知自己不是吕不韦的亲生儿子后，虽然安心了不少，但多少还是有点怀疑。本来，他是不想要吕不韦的命的，但现在看来，此人不除，对自己迟早是个威胁。可如果杀了吕不韦，又怕世人骂他弑父，因为两人是父子关系这个传闻外面传得太盛了，他背不起这个骂名，怎么办？他想到了赵高。
这天散朝后，秦王嬴政便召赵高进宫。
“爱卿可否陪我下盘棋？”
赵高满头大汗地跑进宫，以为发生了什么大事，可听到秦王这么一说，不禁有点哭笑不得：“大王召我过来，就是为了下盘棋？”
“对啊！不可以么？”秦王闷闷不乐地问。
“可您半年都没叫我下棋了~”赵高呶呶嘴，提醒说。
“有这么久么？”秦王故作记不起来的样子，瞪大眼睛问。
赵高笑了笑，拿来棋盘摆开来，问：”大王，这次是您先还是我先？“
”你先，你先！“秦王一边说一边挽起袖子，拿起一颗黑子。
”那我就不客气了！“赵高抄起一颗白子，随手放到棋盘的中宫。
“这可不像你以往的风格啊！”秦王见他一上来便占了中宫，有点拿不定主意该将子放在哪好。
“该出手时就出手嘛，这叫直捣黄龙！”赵高笑嘻嘻地说道。
“算你狠！”秦王想了一下，最终还是决定在中宫附近布阵。
“大王召臣子过来，不是下盘棋这么简单吧？”赵高试探性地问了一句。
“你说呢？”
“依臣看，你是为了文信侯的事而烦恼。”
“何以见得？”
“现在，外面盛传大王要杀文信侯。”
“谁说的？看来朝中的保密工作有问题，这边还没有议，外面已传开了。”秦王听赵高这么一说，不禁皱了下眉头。
见秦王不高兴，赵高连忙说道：“外面怎么传是一回事，但依臣子看，大王是不会亲自下令杀死文信侯的。“
”我不下令，他就不会死，是么？“听了赵高的话，秦王更不高兴了。
”当然不是，我的意思是不用您下令，让他自动消失最好。”
“自动消失？”秦王听了赵高这句话，不觉眼前一亮。
“对，自动消失！”赵高以肯定的语气回答说。
“那此事就交爱卿去办吧，有什么困难么？”
“困难倒是没有，只要你写一封放狠话的信让我捎给他便行了。”
“好，明天你即刻起程，成与不成，就全靠你了！”秦王长长地吁了口气。
第二天，赵高带上秦王的亲笔信，直奔河南文信侯的封地。当见到文信侯时，赵高示意他屏退左右，将秦王的亲笔信递给吕不韦。
吕不韦打开信一看，脸色立时发白，瘫坐到椅子上，因为秦王在信中用很生气的语气质问他：你对秦国有何功劳秦国封你在河南食邑十万户？你与我有什么血缘关系竟号称仲父？除了责问，还下令让吕不韦及家人迁往巴蜀。
”文信侯，您怎么啦？“赵高见吕不韦瘫坐在椅子上，假装关心地问道。
“我都一把年纪了，秦王竟然不念旧情，将我和家人发送巴蜀之地？”吕不韦悲愤地说道。
“秦王已令军队驻在您封地周围，并让我捎句话给您，他可不想背上弑父的骂名，叫您好自为之。”赵高一边说一边将早就准备好的鸩酒放到吕不韦面前，然后施礼告退：“文信侯请多多保重！”
”难道天要亡我？“吕不韦举起双手，仰天叩问。
没有出到半里地，赵高便接到文信侯服毒身亡的消息，于是便赶紧回都城复命，一代奇人吕不韦就这样死于非命。