Serge Gainsbourg est né le 2 avril 1928 à Paris. Il avait une soeur jumelle nommée Lilianne. Leurs parents, Joseph Ginzburg et son épouse, Olia Bessman, se sont installés à Paris en 1919 après avoir fuit la Russie en passant par la turquie. Pendant la guerre, la famille Ginzburg se réfugie en zone libre, vers Limoges. A leur arrivée en France, leur premier fils Marcel meurt d'une pneumonie à seize mois. Puis en 1927, était née une fille, Jacqueline.

Joseph, juif ashkénaze, est musicien et peintre. Plutôt pianiste classique, il devient à Paris musicien de jazz dans les bars et les boîtes de nuit à la mode. Serge se mettra au piano très jeune, et suivant les traces de son père, se formera au classique puis au jazz, par l'intermédiaire des oeuvres de George Gershwin. Une rencontre avec la grande vedette de l'époque, Fréhel, en 1938, laissera un souvenir inoubliable au jeune garçon et influencera certainement son intérêt pour la chanson.