辞官归隐

　　薛令之回乡后隐居于灵谷草堂，过着穷研经书、抱瓮灌园的生活。父子二人同时弃官，回乡后生活窘迫。唐玄宗闻其清贫，“甚心怜之”，下诏用长溪的岁赋资助他。在此期间，薛令之深居简出，偶有出游或访亲会友常留下诗篇。他游太姥山后写下的《太姥山》一诗，表达流连胜景、啸傲林泉的情趣和遁入空门的思想。而别离友人时所写的《送陈朝散》一诗，则表现出他息影林下，不忘为国荐贤的襟怀。

肃宗恩赐

　　至德元年（756年），唐肃宗在灵武（今属宁夏）即位。翌年九月，他回到京都长安后，思及与薛令之的师生情谊‘欲召入朝，但在此前数月薛令之已卒，家赤贫。于是肃宗“敕命其乡曰‘廉村’，溪曰‘廉溪’，岭曰‘廉岭’”。

轶闻故事

草堂铸就开闽第一进士

　　薛令之以开闽第一进士而著世，这与他深居幽山之间灵谷草堂的十年苦读是分不开的。

　　薛氏族谱有载，薛令之出生于世代官宦书香之家。他的六世祖薛贺是梁朝天监年间（502-519年）的光禄大夫。他的高祖薛许，曾经担任隋户曹司理，父亲薛法超也因为文章写得出众而为世所看重。但此时家道已经中落，好在自小薛令之能够在极富中原文化氛围的家庭环境中长大的。薛令之自幼聪敏好学，青少年时，在草堂苦读十载。

　　在距廉村10公里外的山间，找到了灵谷草堂的旧址，这里空气清悠，绿影环抱，农田环绕，鸟儿清翠的叫声回荡在山谷中。在草堂附近，一条清清小溪，水声潺潺，宛若世外桃源。

　　灵谷草堂是个简陋的毛草屋，薛令之青少年就在草堂内日夜苦读，为此他常被村民们取笑。在当时，福建的经济文化不发达，唐朝的科举制度并不深入人心。“学而优则仕”，并没形成普遍的观念。村民们见他家贫，还整日“痴迷读书”、“不务正业”，都笑话他。

　　有一天，一个农夫上山垦种，看到在读书的薛令之，再次笑话他，背负着村民异样目光的薛令之，写下了《灵岩诗》，抒发自己的大志。在诗中，薛令之抒写了，白云作伴、春日垂钓、花鸟啼鸣的美妙“苦读时光”，道出“家贫耽学人争笑”的无奈心情，也直抒自己远大的抱负：“君不见苏秦与韩信，独步谁知是英俊？一朝得遇圣明君，腰间各佩黄金印。”是《灵岩诗》抒发大志的两句诗词，他承袭祖风，对仕途充满信心。此时，从北方传来武则天首创殿试，亲令增加科举人数的消息，令他备受鼓舞。