Fils naturel de Gilbert Colbert, marquis de Saint-Pouange1, cousin du Grand Colbert, il est oratorien, puis précepteur de Louis d'Orléans. Il fréquente le salon de Madame de Lambert et il traduit du grec une Histoire d'Hérodien (1700) et du latin les Lettres de Cicéron à Atticus (1701).
Il entre à l'Académie royale des inscriptions et belles lettres en 1708. Il est élu membre de l’Académie française en 1718 et est nommé abbé de Villeneuve, au Bignon, en 1719, fonction dont il est titulaire jusqu'à sa mort.