抱山散人是一位避世高人，道法高超，但年輕時對世間百態感到心寒，躲進深山隱居不問世事，收了三個徒弟分別是延靈道人、藏色散人和曉星塵。
抱山散人有個規定，本門弟子要一直留在山上隱居，不問世事，如果下山入世，則和自己毫無關系，再也不能回到山上，但抱山散人三個弟子中的兩個都選擇下山，最后慘死山下。
魏無羨母親藏色散人下山后嫁給了江家家仆魏長澤，生下了兒子魏無羨，江家家主江楓眠愛慕藏色散人很久，后來藏色散人和魏長澤在一場夜獵中犧牲了。
而曉星塵和藏色散人一樣選擇下山，曉星塵一個人四處游走伸張正義，不依附于任何仙門，但曉星塵惹惱了老奸巨猾心狠手辣的薛洋，遭到薛洋殘忍地報復。
曉星塵先是自挖雙目，然后又自盡而死，連靈魂被消散了，可以說抱山散人這兩個下山的徒弟都沒善終，還是抱山散人有遠見，一直避世不出。