据悉，柳浑字夷旷，襄州人，先祖从河东搬来袁州。其六代祖柳公式，是梁朝的仆射。柳浑年少成孤，立志求学。天宝初年，他考中进士，被任命为单父县县尉。至德年间，他任江西采访使皇甫公式的判官，多次升官后，任衢州司马，还没到任，又被任命为监察御史。

柳浑生性放纵旷达，不大注意检点，上司拘泥规定，讨厌他的放纵。柳浑不高兴上司的所作所为，便请求到京城外任职。由于当权的人，爱惜他的才干，任命他任左补阙。第二年，升任殿中侍御史，知江西租庸院事。

大历初年，魏少游镇守江西，任命他为判官，多次升官后任检校司封郎中。辖州判案中有开元寺僧人和徒弟夜晚喝酒，喝醉后失了火，把责任推给守门的哑巴仆人，军中执法官接受了贿赂，按原判上报，结果魏少游相信了。虽然人们都知道仆人是被冤枉的，但没人肯说。柳浑和崔公式甫知道后急忙到官府报告，魏少游吃惊地立即审讯，喝醉酒的僧人服罪。

事后魏少游感谢道：“没有二位正直的人，差点让人说我糊涂昏庸。”

柳浑从这以后因公正出了名。到路嗣恭接任后，朝廷又任命他为都团练副使。

大历十二年(777年)，柳浑被任命为袁州刺史。787年，因权相韩公式推荐，拜为宰相。