銜前總統李登輝之命與中共祕密交涉的特使曾永賢，於一九九二年在北京會見中國國家主席楊尚昆，談論美國對台軍售F-16戰機情事。
楊尚昆跟曾永賢說：「該批評還是會批評的！」楊尚昆手指著坐在一旁，負責中共對台情報的獨臂將軍、總政聯絡部長葉選寧說：「今後你就跟這個人聯絡。」
曾入日本共青團與中共地下黨
日本《產經新聞》於今年初刊載《李登輝秘錄》中披露這段祕辛，但國安會前副秘書長張榮豐跟《新新聞》說：「目前已公開的報導都還有很多錯誤。」曾永賢十二月三日以九十六高齡與世長辭，並未填補兩岸密使這段祕辛，張榮豐感慨亦告別這位參與兩岸談判的好搭檔。
曾永賢一生充滿傳奇色彩。早年負笈日本，返台後加入中共地下黨，被捕後於調查局從事匪情研究。曾永賢與留日的李登輝早年都曾參與中共組織。李登輝執政時任命曾擔任國策顧問，統籌大陸事務，並專責與中共總政聯絡部執行密使溝通任務。
深受左派思潮影響的曾永賢，到日本勤工儉學，加入日共的共青團，在早稻田大學成立「社會科學研究會」。當年台灣人大多讀醫科，很少讀社會科學。
曾永賢在《從左到右六十年：曾永賢先生訪談錄》書中憶述，在早稻田大學圖書館打工，每周進入禁書庫一次，看不少馬克思、列寧的書。「我比較不喜歡馬克思的著作，反而列寧的著作看得比較多。列寧談論戰略、策略，較能與革命行動密切結合。」
曾永賢受到二哥曾永安的影響很深。曾永安就讀早稻田大學期間加入日共，自認是左派的民族主義者，認為延安才能代表中國人民。二戰後，曾永安不想回到國民黨統治的台灣，決意前往共產黨建立的新中國，並成為日共與中共的溝通管道。
後來兄弟各奔前程。一九五○年駐日盟軍清洗日本左翼，曾永安協助日共總書記德田球一避居北京，之後定居天津從事國際情報事務，直到文革後病逝中國大陸。
被三七五減租「消滅」的台共組織
曾永賢則回到台灣「搞革命」，最後遭當局逮捕「自新」，並被安排到調查局國際情報系統任職。曾永安在中國大陸的親屬，後來還為曾永賢引薦南京軍區高層，成為兩岸密使的「牽線人」。
四六年春，曾永賢在台灣從宣傳活動和群眾運動開始，出版反對獨裁、爭取民主的《先鋒》刊物；四九年成為職業革命家，在苗栗出版期刊，記錄並傳播《新華社》消息，後來認識從事台灣左翼運動的謝雪紅。
二二八事件時，曾永賢加入謝雪紅成立的「二七部隊」政治部，製作文宣並在火車站、學校散發，與國民黨軍隊對抗。曾永賢憶述，謝雪紅最後拋棄了他，他一覺醒來發現謝雪紅留下字條，說要另謀生路，他們只好率部隊翻山越嶺回到東勢山區繼續抵抗。
