伍辉文故居位于麻城市乘马岗镇四口塘村伍家塆中部。伍辉文故居为为砖木结构，面阔三间11.1米，进深10.3米，建筑面积114.3平方米，座北面南，门向182°。