与他并不亲近的僧人赶出皇觉寺，至于帮他催收佃户的租子、暗地里为他偷鸡摸狗的僧人，高彬自然不舍得将他们尽数赶走。是以他暗地里吩咐这些僧人，离开皇觉寺之后不要走远，待到天黑之后再悄悄回到寺中。众僧心领神会，明面上装出一副惊慌失措的模样，仓皇离开皇觉寺，天黑之后便即悄悄溜回皇觉寺，仍然留在寺中。只有太祖皇帝这等老实的僧人，才被真正赶出了皇觉寺。”