權在臣下，一定想收攬而獨自掌握它”，孝宗大聲贊歎，林栗慢慢地說“：我的意思尚在下文。
”執政官有人向孝宗哭訴：“林栗說我等指鹿為馬，我實在不願意與他同在朝廷任職。
”于是孝宗讓林栗離開京城，去江州任知州。
有旨省并江州屯駐大軍，林栗上奏指出“：紹興三十一年(1161)、隆興二年(1164)，金人二次進犯兩淮地區，幸虧依賴江州一軍分開駐守防備，因此舒州、蕲州、黃州三州唯獨沒被金人入寇。
本州上至鄂渚七百裡，下距池陽五百裡；平時屯駐戍守，好像沒有益處，萬一金人入侵，鄂渚戍守部隊，上面越過荊州、襄陽，池陽之師，下遊增加防備，中間千裡藩籬，實在虛缺。
請不要因為一人的建議，而廢棄長江千裡防線。
”由于林栗的反對，江州屯駐大軍沒有被撤并。
林栗被朝廷以吏部員外郎召回。
冬至，朝廷将在南郊祭天，此前十日，執事官聽誓戒；會慶節，皇帝下旨祝壽不用樂，等到設宴招待金使，才有暫且用樂之命。
林栗認為不可用樂，他緻書宰相，意見沒有被采納，于是他請求辭去充任舉冊官之職，并上奏朝廷：“若聽樂則應廢齋，廢齋則不敢行祭禮，祖宗二百年事天之禮，今日因一介行人而廢棄。
老天可怕，這遠過于外夷。
”朝廷沒有采納他的意見。
林栗兼任皇子慶王府直講，有旨讓二王不時延請講讀官，議論時政，希望能得到謀劃的益處。
林栗認為不妥，他上書說“：漢武帝為戾太子開設博望苑，最後使太子失敗了；唐太宗為魏王李泰設立文學館，最終使魏王失敗。
古人教導世子與我朝祖宗用來輔導太子、諸王辦法相同，隻以講經讀史為事，其他不介入。
如若讓他們議論時政，則是對着兒子議論父親，古人認為是無禮，皇上不可不留意啊。
”
林栗官拜右司員外郎，晉升為太常少卿。
太廟祭享之制，始祖東向，昭南向，穆北向；别廟神主附于祖姑之下，随本室南北向而無東西向神位。
紹興、乾道年間，懿節、安穆二位皇後附祭，有關部門設幄西向。
及至安恭皇後新附，有關部門繼承前次失誤，将神位朝西安放，幾乎與舍祖神位相對。
林栗予以辨别并加以糾正。
朝廷以林栗為直寶文閣，出