杨振宁, 一个卑鄙者的艳遇