苏东坡的祖父苏序为人慷慨，乐善好施，少时性格顽皮，读书不求甚解；成年后喜欢写诗且身手敏捷，诗作多达数千篇，是一位民间诗人：上自朝廷郡邑，下至乡间渔耕，皆能入诗。苏轼的两位伯父都高中进士，大伯父苏澹早亡，二伯父苏涣是排名较好位由眉山出仕的人。
可见眉山苏氏诗书传家，渊源深远。苏东坡的母亲程氏也出自眉山名门望族，外公程文应是眉山首富，舅舅程濬与伯父苏涣为同年进士。当年苏东坡父母的结合并非偶然，虽然当时苏家已经败落，与程家的财富地位颇不搭配，但苏氏家族从学问积累到精神气质，仍别于一般乡绅。苏程两家可谓世家联姻。
眉山的文人士大夫在很长一段时间里或修身于家，或为政于乡，都不肯走科举之路。唯有苏东坡的伯父苏涣勤奋问学，及第入仕，开一时一地之风气。继他之后，眉山出仕者多达数百人，苏氏家族也从此崛起，并由“三苏”发扬光大。史书上记录的苏洵是一个老来发奋、终成大器的典范，还被编入家喻户晓的《三字经》：“苏老泉，二十七。始发愤，读书籍。”可见苏洵虽然在科举上不像他的两位兄长那样成功，但一直怀有著作心和为仕志。
作为苏轼的父亲，苏老泉是一个值得大书特书的杰出人物。他在衰落的家道中一直暗暗积蓄力量，未曾懈怠。他博学多闻，四处游历，遍访名山大川，结交一些重要的文化和官场人物，把希望寄托在两个儿子身上，而且势在必得。
苏洵与夫人程氏对苏轼和苏辙从小进行严格规范的培养教育，夫妇俩一个严肃刻板，一个慈祥温厚，但都是饱读诗书、深怀报国之心的人。他们深深地影响了苏轼兄弟的成长，对其世界观的形成、人生价值的取向，都起到了至关重要的作用。苏轼兄弟立志远行，以入仕进身为较好终目标，这其中当然有着儒学的强大规定力，是“学而优则仕”的必然取向。后来苏东坡在诗中回忆自己的家庭时，写道：“门前万竿竹，堂上四库书。”（《答任师中家汉公》）
苏东坡在青少年时代，居然将一百二十卷、八十余万字的《汉书》手抄两遍，用功之深令人惊叹。他一生手抄《汉书》三遍，比较后面一遍是谪居黄州寂寞之期所为。关于努力治学，这只是许多记录中的一点而已，还有数不胜数的例子。比如晚年谪居海南，他在《夜梦》一诗中写到自己儿时读书不专，耽于嬉戏，突然被父师发现，梦醒之后竟惊慌如吞钩之鱼。
苏东坡与弟弟苏辙幼年师从眉山道士张易简，在天庆观读书三年。张易简收有学童百人，东坡和后来载入《仙鉴》的道士陈太初，是深受道长喜爱的两个学生。东坡被贬黄州时，陈太初
苏轼的后代名气都不大，有四子：
苏迈，字伯达，妻王弗所生。苏迈仕宦不显，曾任德兴尉、仁化令等。“豪迈虽不及其父，而学问语言，亦胜他人子也”，可惜留世的诗文极少。
苏迨，字仲豫，妻王闰之所生。体质羸弱多病，同样仕宦不显，卒时为尚书驾部员外郎。文学才华被其父亲称道，可惜留世的诗文也极少。
苏过，字叔党，王闰之所生。生平记载较详细。宋哲宗元祐六年（1091），曾应礼部试，未第。绍圣元年（1094），轼谪惠州，四年，复谪儋州，皆随行。元符三年（1100），随父北归。轼卒后，依叔父苏辙居颍昌（今河南许昌），营湖阴地数亩，名为小斜川。徽宗政和二年（1112），监太原税。五年，知郾城。宣和五年，通判定州，卒。苏过逝后葬于河南郏县。
苏遁，妾朝云所生，未满周岁而卒。
苏轼有孙13人，其中苏过长子籥、次子籍，苏迈长子箪、次子符有些许记载。到了曾孙辈就更模糊了