干柿鬼鲛知道阿飞就是斑的原因主要与以下情节和设定相关：

带土操控四代水影

带土曾用写轮眼操控四代水影矢仓，使其成为傀儡。这一行为让鬼鲛对“斑”的真实身份产生了怀疑，认为斑可能通过这种手段伪装成其他角色。

阿飞的行为与斑的作风一致

阿飞（带土）在性格、行事风格上与斑高度相似，甚至被鬼鲛称为“斑大哥”。这种相似性让鬼鲛在潜意识中认出了他。

面具男计划与身份混淆

斑临终前计划通过分身“面具男”复活，而“面具男”需要以斑的身份吸引他人。阿飞作为面具男的扮演者，自然会延续斑的言行和记忆。

观众与作者的设定

尾田齐史在漫画中通过角色互动和剧情发展，逐渐揭示阿飞的真实身份。观众通过这些细节也能推断出阿飞与斑的关联。

综上，鬼鲛通过带土操控四代水影的往事、阿飞与斑的高度相似性，以及面具男计划的设定，认出了阿飞的真实身份。