但也有少数官员不和隐蕃来往，如羊衜、杨迪、潘濬，外人都不理解他们为什么反感隐蕃。

其中，对隐蕃最反感的莫过于太常潘濬了。他听说儿子潘翥和隐蕃应酬交往，还送礼给他，勃然大怒。他写信责骂潘翥：“我受到国家的宽厚对待，立志用生命来报答，你们这些小辈在京都，应当时刻谨记恭顺，亲近贤士。仰慕良善，为什么和隐蕃这样来历不明的魏国降人交往亲密，还送钱粮给他？我在远方听到这件事，心中震惊，气血上涌，惆怅了好几天。你收到信后，立刻去见信使，接受我对你的一百杖惩罚，然后去把赠礼取回来。”潘濬激烈的反应，让所有人都不理解，直到后来隐蕃果然反叛并被诛杀后，大家才明白过来，更加佩服潘濬了。

孙权让人押隐蕃上殿，对他说：“为什么要用自己的身体替别人受罚呢？”想要隐蕃招出同党。隐蕃说：“君上，大丈夫图谋这种事，怎么可能会没有同伴！但烈士殉难，不能去牵连别人。”于是至死闭口不答。时年二十三岁。

事后，受到隐蕃牵连的大臣特别多。首先遭殃的是与隐蕃关系最好的廷尉郝普，孙权召见他，问他说：“您之前到处称赞隐蕃，又替他埋怨朝廷屈才，促使隐蕃反叛，都是你的原因啊。”郝普见责自杀。另一个受到牵连的是左将军朱据，他被免官禁足在家中，过了四年才被重新启用。只有潘翥因为父亲的提醒才免过一劫。这件事后，胡综被升为偏将军，兼任左执法，暂时管理诉讼刑狱。

黄龙二年，青州人隐蕃归吴，上书曰：“臣闻纣为无道，微子先出；高祖宽明，陈平先入。臣年二十二，委弃封域，归命有道，赖蒙天灵，得自全致。臣至止有日，而主者同之降人，未见精别，使臣微言妙旨，不得上达。於邑三叹，曷惟其已。谨诣阙拜章，乞蒙引见。”权即召入。蕃谢答问，及陈时务，甚有辞观。综时侍坐，权问何如，综对曰：“蕃上书，大语有似东方朔，巧捷诡辩有似祢衡，而才皆不及。”权又问可堪何官，综对曰：“未可以治民，且试以都辇小职。”权以蕃盛论刑狱，用为廷尉监。左将军朱据、廷尉郝普称蕃有王佐之才，普尤与之亲善，常怨叹其屈。后蕃谋叛，事觉伏诛，普见责自杀。据禁足，历时乃解。拜综偏将军，兼左执法，领辞讼。

蕃有口才，魏明帝使诈叛如吴，令求作廷尉职，重案大臣以离间之。既为廷尉监，众人以据、普与蕃亲善，常车马云集，宾客盈堂。及至事觉，蕃亡走，捕得，考问党与，蕃无所言。吴主使将入，谓曰：“何乃以肌肉为人受毒乎？”蕃曰：“孙君，丈夫图事，岂有无伴！烈士死，不足相牵耳。”遂闭口而死。吴历曰：权问普：“卿前盛称蕃，又为之怨望朝廷，使蕃反叛，皆卿之由。”

归义隐蕃，以口辩为豪杰所善，濬子翥亦与周旋，馈饷之。濬闻大怒，疏责翥曰：“吾受国厚恩，志报以命，尔辈在都，当念恭顺，亲贤慕善，何故与降虏交，以粮饷之？在远闻此，心震面热，惆怅累旬。疏到，急就往使受杖一百，促责所饷。”当时人咸怪濬，而蕃果图叛诛夷，众乃归服。

胡综：蕃上书，大语有似东方朔，巧捷诡辩有似祢衡，而才皆不及。

郝普：蕃有王佐之才。

《吴书》：蕃有口才，以口辩为豪杰所善。

隐蕃学问好，口才好，算是人才。而他的间谍任务，是以离间手段，除掉官员，不论死活，作用相近於谋刺。故有人视之为刺客，并归之以「言刺」。