Ray Charles Robinson yani Ray Charles, Albany,Georgia’da doğmuştur(23 Eylül 1930). Bailey ve Aretha çiftinin çocuğudur. Ray beş yaşındayken, küçük kardeşi George banyo küvetine kafa üstü düşerek ve ölmüştür.
Bu olaydan birkaç yıl sonra Ray yedi yaşındayken kör olmuştur(Kör olmasının nedeni “glokom” adlı bir göz hastalığıdır). Ancak hiçbir zaman görüntüyü tamamen kaybetmemiştir. Okul olarak, Florida Sağır ve Körler Okulu’na gitmiştir. Orada kör alfabesini öğrenmiştir. Ayrıca nasıl enstrüman çalınacağını öğrenmiş ve müzik hayatı başlamıştır.
Oradayken annesi ölmüştür. Annesinin ölümünden iki yıl sonra ise babası ölmüştür. Okuldan ayrıldıktan sonra müzisyen olarak çalışmaya başlamıştır. Müzik olarak jazz ve blues yapmıştır.