刘慧斐字宣文，彭城人也。父元直，淮南太守。慧斐少博学，能属文，起家梁安成王法曹行参军。尝还都，途经寻阳，游于匡山，遇处士张孝秀，相得甚欢，遂有终焉之志。因不仕，居东林寺。又于山北构园一所，号曰离垢园，时人仍谓为离垢先生。