当侯恂就事一个月之后，首辅周延儒为温体仁所排挤而去官。不过温体仁虽取代为首辅，犹不敢彰明较着与东林、复社为难，所以侯恂亦得安于其位。

　　到了崇祯九年，东林健者文震孟被排挤罢相以后，温体仁羽毛已丰，职掌度支的侯恂乃为体仁唆使言官奏劾糜饷，被捕下狱，直到崇祯十四年方始出狱。

　　侯恂明史无传，他的落职获罪，系狱五年之久，始末如何，侯方域诗文中皆未提及。所谓“糜饷”，或非虚诬。

　　侯方域初到金陵在崇祯十一年。南归的原因是在应乡试。

　　爱情

　　第二年方始结识李香君。侯方域《李姬传》：

　　“李姬者，名香，母曰贞丽。贞丽有侠气，尝一夜博，输千金立尽。所交接皆当世豪杰，尤与阳羡陈贞慧善。姬为其养女，亦侠而慧，略知书，能辨别士大夫贤否。张学士溥、夏吏部允彝急称之。少，风调皎爽不韦，十三岁，从吴人周如松受歌《玉茗堂四传奇》，皆能尽其音节；尤工琵琶词，然不轻发也。

　　“雪苑侯生，己卯来金陵，与相识。姬尝邀侯生为诗，而自歌以偿之。初，皖人阮大铖者，以阿附魏忠贤论城旦，屏居金陵，为清议所斥；阳羡陈贞慧，贵池吴应箕，实首其事，持之力。大铖不得已，欲侯生为解之；乃假所善王将军日载酒食，与侯生游。姬曰：‘王将军贫，非结客者，公子盍叩之。’侯生三问，将军乃屏人述大铖意。姬私语侯生曰：‘妾少从母识阳羡君，其人有高义；闻吴君尤铮铮。今皆与公子善，奈何以阮公负至交乎？且以公子之世望，安事阮公？公子读万卷书，所见岂后于贱妾耶？’侯生大呼称善，醉而卧。王将军者，殊怏怏，因辞去不复通。

　　“未几，侯生下第，姬置酒桃叶渡，歌琵琶词以送之。曰：‘公子才名文藻，雅不减中郎；中郎学不补行，今琵琶所传词固妄，然尝昵董卓，不可掩也。公子豪迈不羁，又失意，此去相见未可期，愿终自爱，无忘妾所歌琵琶词也。妾亦不复歌矣！’侯生去后，而故开府田仰者，以金三百锾邀姬一见；姬固却之。开府惭且怒，思有以中伤姬。姬叹曰：‘田公宁异于阮公乎？吾向之所赞于侯公子者谓何？今乃利其金而赴之，是妾卖公子矣！’卒不往。”