《闲来笔潭》是吴官正从中央领导岗位离任后，在近十年间，将一些回忆、随想、感悟等整理成的文字记录，并结集成册，是其从“领导岗位上退下来，心情很舒畅”（书中《退后的心态》语），有了相对闲暇的时间，才逐渐整理、积累、付诸版牍，而这应来源于其平常的阅读写作习惯。
《闲来笔潭》的成书、出版缘由在于，理工科出身的吴官正喜欢读书，也一直有写作的习惯。人民出版社曾经出版过吴官正的三部书，但均为工作文稿，而《闲来笔潭》则完全不同，该书中没有任何工作文稿，都是作者离开岗位后保持本色，自己的用心写作。而在夫人张锦裳的提议下，他将‘闲时走走、看看、想想、议议’的诸多所得记录在笔记本上，数量多达40余本，记录了吴官正的童年记忆、求学经历及部分工作回忆。用他的话说，“用来打发时光，咀嚼其中滋味，找些人生感悟’。”
鉴于此前的合作，人民出版社找到吴官正，希望能将文章集结成册。作者遂挑选了百余篇文章，交给工作人员打印，然后交给了出版社。他将此文集取名《闲来笔潭》，大意为“写的东西像一个潭，一般不大，深浅也无标准”。至于该书所配的画作，则是作者花了100多天创作的铅笔画，很多铅笔画都是上万笔，不少画还配有诗文。由于作者自谦“字不如夫人”，因此大都是其夫人张锦裳帮助题写。
（本目录图注：吴官正画作《梦里涂鸦》题诗：梦里涂鸦画乌鸦，两只张口争说话，高声嚎叫雾霾大，空气质量这么差，产生原因要彻查，祸害头子应捉拿，失职干部得撤下，否则每天还要骂。）
