失，随世俯仰，改其常度，则陛下亦安所用巨？若守其初心，始终不变，则群小侧日，必无安理……所以反复计虑，莫若求去。非不怀恋天地父母之恩，而衰老之余，耻复与群小计较短长曲直，为世间高人长者所笑。伏望圣慈……早除一郡。所有今未奏状，乞留中不出，以保全臣子。着朝廷不以臣不才，犹欲驱使，或除一重难边郡，臣不敢辞避……惟不愿在禁近，使党人猜疑，别加阴中也。
在苏东坡再三恳请之后，在元佑四年三月十一日，朝廷终于允其所请，任命他以龙图阁学士出任杭州太守，领军浙西。浙西太守管辖六区，包括现在的江苏在内。临行前，皇帝赐予茶叶、银盒、白马及镀金的鞍鞯、他的官服上的金腰带等礼品。马对他无用，他转送给穷门人李廌去卖钱。
他启程时，老臣文彦博，年已八十三岁，但仍活跃，为他送行，劝他不要再写诗。那时苏东坡已经上马，他大笑说：“我若写诗，我知道会有好多人准备做注疏呢。”