扶榇归里
　　边贡有感于朝政日非，加以身体病弱，于正德十二年（1517年）上疏乞终养致仕，未获示复而母病死任所，遂扶榇归里，居丧守制，至嘉靖元年（1522年）始起复任职。居家期间，边贡读书授徒，与友人唱酬，而更多时间则是流连于家乡湖光山色之间。因此写下了大量吟咏故家湖光山色之作。如《西园八景》、《寒食郊行》、《题贾园四首》、《七月四日泛湖》、《湖上杂兴》、《登千佛山寺》、《游龙洞山》、《出靳村望灵岩寺》、《泰山回马岭》、《登岳次刘希尹韵四首》等，都为写景佳作，表现了诗人对家乡的热爱。其次，诗人也写有不少关心农事的诗篇，如《望雨》、《忧旱》等。

被劾免职
　　（1521年）三月，武宗朱厚照病逝，其堂弟厚熜继帝位，诏起复边贡为南京太常 寺少卿，提督四夷馆。南京为留都，各部衙署形同虚设，官员有职无权，诗人居此常感不安。嘉靖七年（1528年），转刑部右侍郎。官职升迁了，诗人退隐的念头也滋生了。是年冬，他借赴京述职之机，回程经济南以延医治疗为由，上疏乞休。未获准，旋拜太仆卿，迁户部尚书。自嘉靖以来，七年之间，五选华秩，屡屡升迁，边贡本应安于职守，黾勉王事，而他却牢骚满腹，一再恳请致仕，为常人所难解。盖诗人非一般利禄之徒，欲有为而不得，不甘尸位素餐，故常戚戚于怀而求退心安。在欲有为而不能，欲退隐而不准的情况下，边贡于公暇之余，浪迹山水之间，写下了大量吟咏南京一带山水的诗歌、如《杂画》、《画上》都写得真切细腻，亲切感人。而《经西湖》、《谒文山祠》等描写西湖景胜的诗作，则韵致深厚，文笔传神，为人所激赏。
　　事有偶然。边贡与其父一样，被劾免职：边父因不贿买宦官，横遭诬陷；边贡则是疏狂任放。受人忌害。所由不同，而志操耿介则一。归家后，诗人经常卧病。
　　好交游，悠闲无事则游览山水，每到一地，都要“登临山水，购古书，金石文字，累数万卷”，后被都御史劾其纵酒废职，被罢官归。平生喜收书，有求古书癖。所蓄书万余卷，嘉靖十年（1531），他被罢官归故里，在济南大明湖畔筑“万卷楼”，将一生收藏的金石书籍纳于其中。不幸第二年即嘉靖十一年（1532年）“万卷楼”火灾，他仰面大哭：“嗟呼，甚于丧我也！”诗人痛苦异常，由此大病不起，遂起病而卒。终年57岁。