Au siècle suivant, Avignon devient la capitale de la Chrétienté. En 1309, l'installation des papes dans la ville va valoir à Villeneuve un destin extraordinaire. Cette dernière va en fait profiter du luxe inouï dans lequel vivaient les pontifes et les grands prélats. Si Avignon est la cité des papes, Villeneuve va devenir celle des cardinaux qui n'hésitent pas à franchir le Rhône en quête de résidence, car on est un peu à l'étroit dans Avignon pour loger les hauts dignitaires. Et puis on y étouffe derrière ses remparts. Alors le cadre enchanteur de Villeneuve ! On leur attribue, on leur livre (d'où le nom de livrées) de vastes demeures ou des groupes de maisons qu'ils transforment en de somptueux palais. On émet aussi l'idée que le mot dérivant du latin puisse signifier libéré, désignant ainsi les maisons libérées à l'usage des hauts fonctionnaires de la curie. L'une d'entre elles, ayant appartenu à Innocent VI du temps où il était cardinal, deviendra du temps de son pontificat la célèbre Chartreuse.