后来，苏轼在湖州看到了地方豪强官吏的横行霸道，很不满意，写了一些诗，讽刺这些事。没想到这些诗传到京城，几个反对苏轼的官僚从苏轼的诗文里摘出几句话，诬陷苏轼诽谤朝廷，大逆不道。他们撤了苏轼的职，把他押解到东京，关在大狱里，想把他处死。
苏轼在牢监里足足被关了一百天，受尽折磨。后来，因为实在算不上什么大罪，宋神宗才下令把他释放，贬谪到黄州（今湖北黄冈）。
苏轼到了黄州，挂了个小小的空头官衔，实际上过着流放的生活。他穷得过不了日子，后来靠朋友的帮助，弄到一块地，自己耕种起来。他还亲自整理场地，在东边山坡上盖了一间屋。他给自己起了一个别号，叫东坡居士。后来，人们常把苏轼叫做苏东坡。
苏轼在政治上失意的日子里，常常游览山水，写作诗歌，抒发他的心情。有一次，他打听到长江边有个名胜古迹叫做赤壁，就在一个月光皎洁的夜里，约了几个朋友，乘着小船到赤壁去游览。在那里，他想起三国时期曹操和周瑜大战的情景，触景生情，十分感慨。回来以后，写了一篇文章，叫做《赤壁赋》。
苏轼不但是写散文和写诗的能手，而且在词的写作上也有很高的成就。他写的词，有一种与众不同的豪放风格。在游赤壁之后，他又写了一首《念奴娇》（词牌名）词的上半首是：
大江东去，浪淘尽千古风流人物。
故垒西边，人道是三国周郎赤壁。
乱石崩云，掠涛拍岸，卷起千堆雪。
江山如画，一时多少豪杰。
苏轼是个博学多才的人，但是他在地理上却出了一个不小的差错。原来黄州的赤壁并不是周瑜火烧曹军的地方。三国的赤壁在现在武汉的上游，而黄州却在武汉下游。不过，黄州的赤壁却因为苏轼这一个差错出了名。后来人们为了纪念这位大文学家，就称它为“东坡赤壁”。