西汉乐府的兴盛和发展,与汉武帝的重视有着密切关系。公元前112年,汉武帝下令将乐府进行改组,扩充了搜集、整理、改编民间音乐的人员,并设了“协律都尉”,由乐工出身的著名音乐家李延年担任,以主持音乐的改编和创作。当时,乐府中专业音乐家有张仲春等人,分工不同的乐工有上千人,还有司马相如等几十位有名的文学家,由乐府令丞进行总领导并负责一般的行政事务。改组后的乐府设在长安西郊专供帝王游乐的“上林苑”里。
乐工是乐府里的基本成员。西汉乐工可分为数十种,如专门表演用于祭祀的周秦以来及汉代乐舞的“郊祭乐员”,演秦出行仪仗的“骑吹鼓员”,演秦南北各地民间音乐的邯郸、江南、巴渝等鼓员,演秦乐器的竽员、瑟员、琴员,演唱各地民歌的蔡讴员、齐讴员,表演各地百戏的秦倡员、秦倡象员,以及表演“颠歌”(西南滇族歌曲)和“狄革是”(西域各族)等少数民族音乐的“诸族乐人”。他们绝大部分来自艺术经验丰富的民间艺人和少数民族的乐人,这些都充分说明了我国音乐文化,自古以来就是以汉族为主体的各族人民共同创造的。除了表演乐工以外,乐府还设有管理乐工的“仆射”2人,专门选读民歌的“夜诵员”5人,专做测音工作的“听工”一人,以及“柱工员”、“弦工员”等乐器制作和维修的工匠与宴会的服侍人员。