平山堂北有谷林堂，隨山勢高出階，系蘇東坡於北宋元祐七年（1092）由穎州徙知揚州時，為紀念他的老師歐陽修而建，堂成之日，蘇東坡賦詩《谷林堂》：“深谷下窈窕，高林合扶疏。美哉新堂成，及此秋風初。我來適過雨，物至如娛予。稚竹真可人，霜節已專車。老槐苦無賴，風花欲填渠。山鴉爭呼號，溪蟬獨清虛。寄懷勞生外，得句幽夢余。古今正自同，歲月何必書”。蘇詩援引了古詩“下窺幽谷底，窈窕一何深。魚動起重淵，鳥驚奮高林”的贊美和驚嘆，堂名“谷林”取自蘇詩“深谷下窈窕，高林和扶疏”一句，深寓著蘇東坡對老師的敬重和仰慕，師生之誼令人感同身受。谷林堂坐北朝南，面闊五楹，中懸“谷林堂”匾，相傳它是蘇東坡讀書之處。堂前花壇上有老梅、天竹數株，庭中古松挺拔過檐，景物清幽，一幅凌霜鬥雪的歲寒三友圖，更彰顯歐公傲世風骨。谷林堂北是歐陽祠，又名六一祠，為歐陽修的後人、清時的兩淮鹽運使歐陽正墉重建於光緒五年（1879），並祠蘇東坡。祠闊5間，前有回廊，方梁方柱，挑槽飛角。詞壁上嵌有根據清宮藏本摹刻的歐陽修像，由於光線和觀看角度的關系，遠看白須，近看黑須，神態肅穆，氣度軒昂。為了刻好這幅畫像，據說當年用重金聘用了揚州最著名的石刻名匠朱靜齋。朱靜齋當時年事已高，自思幾十年間雖然名馳大江南北，卻從未在家鄉揚州留下過得意之作，於是便欣然應聘。嘔心瀝血，殫精竭智，化了半年多的時間才刻成了這幅留名後世的“神品”，形神兼備，栩栩如生，一時名滿天下。為了說服雇主讓這幅畫像永駐揚州，朱靜齋甚至放棄了酬金。盡管這只是一種傳聞，但雇主之狡，巨匠之誠，已躍然低面。只可惜畫像在“文革”中也劫數難逃，寺僧為了防止石刻被砸，用石灰覆蓋表面，雖然石刻保住了，但畫像的修復已難再現當年的風采，令人唏欷嘆息。寺祠中懸有“六一居士”匾額，原為歐陽正墉書題。祠中有歐氏族人歐陽利見的對聯：“山與堂平，千古高風傳太守；我生公後，二分明月夢揚州”，畢盡仰慕牽念之情，而清代揚州文人汪懋林步歐陽修原韻所作的一闕《朝中措》更能表達後人的心儀和愛戴：“平山舊址已成空，清磬暮雲中。當日煙花夜月，而今禾黍秋風。 山川無價，文章有主，我輩清鐘。再種堂前楊柳，新詞重和坡翁”。