书院坐北朝南，为几进几出的大四合院建筑，布局相当考究；书院建筑多为石木或砖木结构，屋顶均为人字形硬山顶。礼圣殿、御书阁、明伦堂坐落在楼阁庭院，跨过书院大门，由近及远依次排列着五个高大的院门，由此构成五大院落，每一个院落又有两至三进。
第一个院落是为先贤书院，由中门分前后二进，前院辟作一个花圃，后院为先贤祠，供奉白鹿洞书院之诸先贤，正中央正是白鹿洞书院的首任山主，白鹿先生李勃。先贤书院虽列为白鹿洞的四小书院之一，但是跟另外三个小书院比起来，学子实在算不上多，在徐远看来，先贤书院更像是前世的纪念馆，专为纪念白鹿洞诸多先贤而设立。否则你见过哪个书院最主要的设施是一座祠堂，而非学堂的？
出了先贤书院往东继续深入白鹿洞书院，便是白鹿洞四小书院之二的棂星书院，棂星书院作为进入书院大门之后的第二座院落，由礼圣门分为前后二进，礼圣门原称先师庙门，在白鹿洞四小书院的特点逐渐细化之后，才改叫做礼圣门，与门后学堂旁边的礼圣殿相对应。在四小书院之中，棂星书院的学子最讲规矩礼数，书院成立数百年来，几乎没出过离经叛道之辈。
棂星书院的学子离开白鹿洞之后，大多会被招进礼部当差，礼部也因此成为了六部之中唯一一个太学院和国子学的士子少于白鹿洞书院士子的。棂星书院的堂主历来更是天下读书人在礼数上的典范，每一任堂主都堪称温文如玉，谦谦君子。白鹿洞四块玉佩之中的君子佩因此在曾经相当长的一段时间里都归棂星书院的堂主所有，若不是数十年前柳元横空出世打破了棂星书院对君子佩的“垄断”，这份记录估计还要持续很久。
但也正因为如此，在徐远和柳元一同穿过棂星书院时，没少受棂星书院学子的注视。虽说没有一人做出那两眼上翻的表情，但是徐远能够清楚地感受到他们眼神里的异样神采。
徐远笑着低声道：“想不到太傅竟然也有不受人待见的一天。”
兴许是回到了白鹿洞书院的缘故，柳元难得开了个玩笑，“在上山前，老臣正好在书上看见一句话，天底下尚有视金钱如粪土者，何况人哉？”
这话的意思是，银子这样照理说人人都爱的东西都有人把它当做粪土，更何况是人了。柳元的声音不算高也不算低，就是正常说话，正好能让四周的人听清。四周棂星书院的学子们听见这话再也忍不住了，齐刷刷翻了个白眼。
这个柳元跟堂主比起来简直差远了，如何配拥有君子佩？
徐远笑着道：“我曾听皇兄说过，自从白鹿洞的四块玉佩雕琢完成之后，一直以来都是四小书院各一块，虽然佩主不一定为书院堂主，但四个佩主必定分别出自四小书院。太傅拿走了本属于棂星书院的君子佩，那棂星书院如今的玉佩，又是哪一块？儒士佩吗？”
柳元笑着道：“儒士佩一直都是白鹿书院的，棂星书院岂能拿得走？我带走君子佩之后，山主将本属于我们紫阳书院的紫衿佩交给了棂星书院如今的堂主。从棂星书院的学子到堂主，他只不过用了二十一年时间，为棂星书院历代堂主之最，拿这块紫衿佩，倒不算是埋没。”
四棂星书院的学子们听见这话不再仅仅是翻白眼，而是一个个的咬牙切齿，盯着徐远身旁的柳元恨不得冲上来和他拼命。白鹿洞四块玉佩，君子，贤士，儒士，紫衿，前三块素来受人追捧，唯独最后一块紫衿佩，却是人人敬而远之。
紫衿一名取自“高阁俨像设，霓衣紫霞衿”，用来代指身居高位者。读书人大多清高，白鹿洞的士子更是如此，尽管心中可能向往功名利禄，但是没有一人会将其展露出来，反而故意摆出一副淡漠名利的模样。久而久之，这紫衿佩也就成为了白鹿洞四块玉佩中唯一一块不受人待见的。
至今棂星书院的学子和紫阳书院的学子也在为柳元和棂星书院的堂主究竟谁该是君子佩佩主，谁又该是紫衿佩佩主而争吵不休：前者说柳元为大徐国师，身居高位，当持紫衿佩；后者则是不客气得多，直接拿棂星书院的堂主只花了二十一年就从学子成为了堂主，若不会点钻营的本事岂能做得到？这紫衿佩，还是他拿最合适。
穿过礼圣门来到礼圣殿前，柳元突然停下了脚步，站在礼圣殿门外朝着殿内正中的先师行教立像恭恭敬敬地作了一揖，方才直起身来朝身旁的徐远作揖告罪，继续朝白鹿洞书院深处走去。
跟在二人身后的棂星学院学子们看见这一幕有不少心中犯起了嘀咕，不去说柳元这一揖是真心还是假意，至少他这一揖在规范上堪称完美，毫无可以挑剔之处，几乎比他们棂星书院专门教授礼数规范的老师还要规范一些。
有道是管中窥豹，光凭这一点，就能知道一些为何柳元明明出身白鹿洞四小书院中最为离经叛道，不择手段的紫阳书院，下山时带走的却不是紫衿佩而是君子佩。
这并不是毫无道理的。
穿过棂星书院，徐远和柳元一行人来到了进入书院大门的第三个院落——白鹿书院。白鹿书院门楼重檐灰瓦，檐下花岗岩石额上由书院初任堂主题写“白鹿书院”四字。门内又是一个小院，东西各辟出一排厢房，廊柱卜有诗联。西廊柱联：“雨过琴书润，风来翰墨香”。东廊柱联：“傍百年树，读万卷书”。
看这两道诗联就知道，白鹿书院是白鹿洞四小书院中书卷气最重的。棂星书院的学子礼数最好，而白鹿书院的学子则是学问最好，因此也最受追捧。每一年的初夏文会通常都是等白鹿学院的学子被抢完了之后，才能轮到其他三个书院的学子。
院中设六边形石桌一张，桌下石柱刻有精致的浮雕狮子滚绣球、猛虎下山、奔马以及狼嚎图案，石桌周围另设六个青石鼓墩，其中一个青石鼓墩上坐着一个男子，男子背对徐远，打扮和峨冠博带的白鹿学院士子不同，身穿一件石青色蜀锦圆领袍，一手放在桌上，手掌下压着一把收在鞘中的宝剑。