《琐记》中提到作者离开家乡的原因是躲避流言和重伤,寻找与自己志同道合的一类人。《琐记》主要是作者在思想转变期的作品。作者为了冲破封建束缚,为追求新知识,因而离家求学至出国留学。当时作者的家道中落,也是作者离开故土的原因之一。