一些政客小人开始对元祐党发动大规模的进攻，不断施压。欧阳修、韩琦、富弼、曾巩、司马光、苏舜钦等朝中老臣悉数离京。神宗皇帝对此十分疑惑，他找来王安石，王安石答道：“我们要变法，就要不惜一切代价，那些人走了，陛下就像成是阻碍改革的绊脚石走了。”
既然朝廷中的老臣都请求外放了，那么现在革新党的最大政敌就是在许昌的曹家宣和在湖州的苏轼了。政客小人们在苏轼和曹家宣的谢恩奏折上分别找到了十分牵强的错误，将两个人告发到了神宗那边去。神宗皇帝大怒，将两个人从地方上押往京师乌台受审。曹家宣被解职，这可真是比拿一等奖还过瘾的事。他们两人被关在一起，苏轼的儿子苏过每天都来送饭，曹家宣的妻子周氏每天也来送饭，不过这倒是让苏轼十分嫉妒。苏轼看到周氏的第一眼，就被惊艳到了，她不甘心的揉了揉眼睛，随后说道：“要是老子妻子也他妈的这么漂亮就好了。”不过这句话没人听见，就算听到了，也假装没听见，不然，等他出狱了还不得跪上好一段时间的搓衣板！
苏轼写了几首十分感人的诗句给他的弟弟苏辙苏子由。曹家宣也想写诗，只是没有所写之人，他忽然想起了心中的那个女孩，于是提笔写了一首诗：
猫与老虎本一家
奈何反目分两家
铁牢笼中空等闲
心绪飘到你的家
苏轼可写不了这种艳诗。他写诗给他的弟弟苏辙，说他来世还愿意与他做兄弟。曹太后看了十分感动，亲自跑去和神宗求情，苏轼的好友章惇也上表请求释放苏轼。可怜的曹家宣没有人给他写奏折为他求情啊。于是，苏轼以罪官的身份被贬到了黄州做团练副使。而曹家宣则是继续在京师吃了三个月牢饭，才被放出来，神宗将他调到常州做太守去了。
曹家宣到了常州，亲自下到农田，当时收成不好百姓颗粒无收，他再次冒险上表神宗，请求推迟新法。常州的治安也非常差，经常闹“飞贼”。曹家宣在常州制订了严苛的刑法，并且请求京师派军队来加强管控。熙宁二年春，曹家宣被调往绍兴做太守。这时，曹家宣的父亲曹堪病逝了，他连夜赶回了苏州，只见房间已经变成了灵堂，颜色成了单调的白色，屋内除了花圈什么都没摆，桌上放着曹堪的画像。他将他的父亲葬到了南浔老家。曹家宣时年二十八岁。既然曹家宣到了苏州，他便想着去找那个女孩。他再度攀上飞来峰，只是这里已经变成了一道景点。王安石写登飞来峰的亭子上面写着“宰相王安石所做”他苦笑一声，看了一眼，不禁感叹起了物是人非。
到了那女孩的家，他整理了一下着装，推开门走了进去，却看见那个女子领着三个孩子在做饭，他男人则趴在桌子上面看曹家宣的文章——没错是他的诗！这个男人看见曹家宣走了进来，十分好奇，问道：“先生是……”曹家宣拱手作揖道：“在下曹家宣，现任绍兴太守。”那个男人见来的人是曹家宣，大喜，要留他吃饭。曹家宣苦笑了一下，婉言谢绝了。我想他此时此刻心里一定很痛苦吧。