镇江高家自前朝时便是书香世家，崇祯帝刚刚即位之时，高家先祖为右佥督御史，上书被贬斥丢了官位。

这位高家先祖也是果断，索性卖掉了京城的家宅，返回了祖籍镇江，置地建宅，勉强当个富家翁。

后来满清入关，势不可挡，高家先祖便制订了缓缓图之的方略；表面上恭顺降服，暗地里资助义军会社，为他们提供情报和财力支持。

高远志身为这一代家主，少年时还曾经跟随过天地会前任总舵主游历