核桃园与山西交界，紧邻旧关，为井陉的西大门，是井陉古驿道的最西节点。核桃园历史悠久，据出土文物考证，西汉时已建村。原名“段基村”，明崇祯年间，因村里桃树甚多，便改村名为核桃园。
驿道从村中穿过。村东、西各有驿道阁。西阁二层，一层为基台，二层为硬山前带廊砖木结构，二层东面有栏板和柱石，中栏板书“西通秦晋”大字。西阁东北侧是关帝庙，庙内竖有驿道“告示”碑，内容为警示往来官差不得滋扰生事。东阁有三层，阁下留有车辙痕迹。
村中大道旁有古槐树一棵，据说有800余年。街头的村民说，这样的古树，全村共有六棵，五棵槐树，一棵楸树。一旧店铺院内也有古槐树一棵，据介绍是唐代古树，遗有清嘉庆十一年刻立的碑一通，为吴姓主人告诫后人：先人遗树，后人不许毁坏。
村中有古桥一座，名会源桥，现仍可以通行，桥头立有清嘉庆八年刻立的重修会源桥碑，为核桃园人、国子监学正韩瑾撰并丹书。
历史上，核桃园很是富足，村街两旁商铺甚多，现在在村街道两旁仍可以看到旧商铺的遗址。村中的古民居很有特色，不少古居保护完好。由于时间安排匆忙，大家都觉得没看够。