在宋朝尼山山腳下的宮家樓村，有一座曾經輝煌無比的大宅子，屬於趙家。趙家曾是當地的名門望族，宅內房間眾多。然而隨著時間的推移，家道中落，宅子逐漸破敗，許多樓閣荒廢。
於是，詭異的事情接連不斷，門總是無端地開開關關，夜裡的動靜讓趙家的人驚恐萬分。無奈之下，趙家人大多搬離了這裡，只留下老管家看守。如此一來，宅子愈發荒涼，還不時傳來唱歌說笑的聲音，彷彿在舉辦一場熱鬧的聚會。
趙家有個侄兒叫趙全，他性格豪爽不羈。他對老管家說：“不管你在這裡看到什麼、聽到什麼，都要立刻告訴我。”
一天晚上，老管家看到宅子裡有燈光在樓上閃爍，老管家急忙跑來告訴趙全，還勸他別去。可趙全根本不聽，徑直朝宅子走去。他對這裡熟悉得很，扒開雜草，沿著蜿蜒的小路來到了樓上。
剛進去時什麼都沒發現，過了一會兒，聽到有人說話。他偷偷一看，屋裡點著一對蠟燭，一位看起來像學者的老人坐在那裡，對面是個四十來歲的婦人。東邊有個小夥子，大約二十歲，右邊是個少女，也就十五六歲的樣子。
桌上擺滿了酒菜，幾個人正有說有笑。趙全大喝一聲衝了進去，笑著喊道：“有不請自來的客人到！”這一嗓子把眾人嚇得不輕，紛紛躲了起來。
只有那老人問道：“你怎麼闖進我們屋裡來了？”趙全說：“這是我家，你們在這兒吃喝玩樂，卻不叫我這個主人，太吝嗇了吧。”老人仔細打量了他一番說：“你不是主人。”趙全說：“我是趙全，是主人的侄兒。”
老人聽了，笑著拱手說：“久仰大名啊。”隨後邀請趙全入座，還讓家裡人換上好酒好菜。趙全說不用，老人便給他倒酒。趙全又說：“咱們也算有緣，剛才喝酒的都別躲了，一起喝。”
老人喊了聲“阿勇”，那小夥子就從外面進來了。老人介紹道：“這是我兒子。”阿勇作揖後坐下。趙全簡單詢問了他們的名字，老人說姓胡。趙全性格豪爽，與阿勇相談甚歡，阿勇也不拘束，兩人彼此欣賞。趙全二十一歲，比阿勇大兩歲，便管阿勇叫老弟。
老人說：“聽說你爺爺寫過《沂河外傳》，知道嗎？”趙全說知道。老人又說：“我是那裡面某個家族的後裔，近代的家族歷史我還記得，再往前就不清楚了，希望你能給我講講。”趙全於是開始講述那個家族的傳奇故事，講得繪聲繪色。
老人聽後很高興，對兒子說：“真是聞所未聞啊。趙公子不是外人，去把你媽和小青叫出來，讓她們也聽聽，瞭解一下咱們祖先的事兒。”阿勇進了裡屋，不一會兒，婦人跟少女就出來了。
那少女長得極為美麗，肩膀瘦削，腰肢纖細，眼睛靈動有神，簡直是絕世容顏。老人指著婦人說：“這是我老婆。”又指著少女說：“這是小青，我侄女，聰明伶俐，記性好，所以讓她來聽聽。”
趙全一邊講述故事，一邊不時地看向小青。小青察覺到了，便低下頭。趙全還偷偷踢她腳，小青把腳縮回去，卻沒有生氣。趙全喝得有些醉了，控制不住自己，拍著桌子喊道：“要是能有這樣的美人，讓我當皇帝我都不幹。”
婦人見他這副模樣，便拉著小青離開了。趙全十分失望，跟老人告辭後，心裡一直惦記著小青。
第二天晚上，趙全又來到宅子，屋裡還留著淡淡的香味。可他等了一整晚，什麼動靜都沒有。回去後他跟女朋友商量，想搬到那宅子裡住，盼著能再見小青一面。女朋友不同意，趙全便獨自前往。
夜裡，他躺在一個桌子上，突然來了個披頭散髮的鬼，臉黑得像鍋底，眼睛直勾勾地瞪著他。趙全一點也不怕，還笑著用手指蘸了墨水往自己臉上塗，與鬼對峙。那鬼似乎不好意思了，扭頭就走。
第三天深夜，趙全正要