方文为方大铉长子，方德益第13世孙。明朝桐城方氏，是一大家族，以仕官、治学称于世者甚多。方大铉，万历进士，任户部主事，在方文七岁时去世。其侄方以智（比方文大一岁）与其同学十四年，二人在明代已有声名。在明代，方文仅为诸生，未及出仕，朝代更替，入清后以气节著，靠游食、卖卜、行医或充塾师为生，但交游遍朝野，名流无不与之交往。

方文卒后葬于江宁（今江苏省南京市）西单桥小山脚下陈泗水家山，乙山辛向。大妇左氏，左光斗女，生卒未详，葬家乡桐城龙眠山碾玉峡。继配汪氏，葬夫合墓。侧室金氏，葬江宁单桥萧家园。

方文自号嵞山，将诗集命名为《嵞山集》，已深含不忘故国之意。“嵞山在怀远县城外，周世宗望之，谓濠州有王者气。”后来，果然朱元璋起家濠州，定鼎大明。方文自号嵞山，即不忘大明也。