王昆仑的言行虽然没有暴露其政治身份，但依然引起了军统特务头子戴笠的重视。在这期间，蒋记国民党为确保“攘外必先安内”的国策执行，在其统治区——尤其是南京和上海大搞白色恐怖，不少党的地下组织被破坏了，很多党的优秀干部死在敌人的屠刀下。
为了王昆仑的安全，也为了保证党的白区工作能正常运行，卢涛和王世英专门和王昆仑谈了一次话：“为了便于工作，我希望你经常到上海去，而不是像现在这样，我们来南京见你。”王世英开门见山地说。
“可以，”王昆仑沉吟片刻，又问道，“我们在上海什么地方见面？安全问题有无保证？”
“你可否在上海搞个小公馆？最好把你在无锡的太太也接到上海去？”卢涛似有准备地说。
对此，王昆仑早有此想法，但并不是为了方便党的工作。诚如前文所述，范映霞在无锡一住就是三年，原本和王家长者、同辈间的矛盾日趋尖锐，几乎到了再也无法共处的地步了！每次王昆仑由南京回无锡小住，不仅享受不到一点天伦之乐，而且必然要和妻子范映霞大吵大问，搞得他上无法当孝子，下不能对兄妹。再者，范映霞又生了一个既乖又漂亮的女儿，几乎成了王家——尤其是王昆仑掌上的明珠。从某种意义上说，王昆仑回无锡的主要原因之一就是关照大女儿金陵读书，和牙牙学语的小女儿玩耍。他为了根本解决范映霞和王氏家族的矛盾，同时又能经常见到两个可爱的女儿，曾几次动议在上海建立自己的家。而今，党组织出于工作的需要，希望他这位国民党的立法委员学着其他达官显贵的样儿海建公馆，因此，他当即答说：“我近期就在上海建立公馆，到时我再通知你们地址。”