George Duvivier estudió violín en el Conservatorio de Música y Artes de Nueva York. En 1936, se incorporó a la Orquesta Sinfónica Central de Manhattan y comenzó a interesarse por el jazz, en particular por el contrabajo. Para ampliar su formación musical, estudió composición en la Universidad de Nueva York (1937-1939). Debutó como músico de jazz en 1940, acompañando a Coleman Hawkins y tocando después en la big band dirigida por Lucky Millinder (1942-1943). Tras su servicio militar, Duvivier escribió arreglos para Jimmie Lanceford (1945-1947), y continuó su trabajo como arreglista para "Sy" Oliver (1948-1949). Tras abandonar su instrumento durante algunos años para dedicarse a los arreglos, Duvivier retomó el contrabajo para acompañar al cantante Billy Eckstine y a la cantante Lena Borne, con quienes realizó una primera gira por Europa en 1950 y una segunda en 1956. Tocó con Bud Powell (1953-1956) antes de que éste se trasladara a Francia. En 1959, graba "Improvisation and Mediations" con el pianista-director del Modern Jazz Quartet, John Lewis, un álbum en el que destaca su interpretación del contrabajo. Músico de estudio muy solicitado, Duvivier grabó para bandas sonoras de cine y televisión. Como músico de acompañamiento, tocó con la misma facilidad con músicos de jazz clásico como Benny Goodman, Count Basie y Ben Webster que con músicos modernos como Dizzy Gillespie, Stan Getz y Eric Doliby. El contrabajo de George Duvivier es una mezcla de contención y potencia en el volumen del sonido que produce, pero también de rigor y precisión.