फिदेल ऐलेजैंड्रो वित्तोरे कास्त्रो रूज़ वर्तमान आधुनिक प्रान्त होल्गुंइन के मयारी के करीब बीरन के चीनी उत्पादक एक परिवार में पैदा हुए थे। यह क्षेत्र तब ओरिएंटे प्रान्त में था, फिलहाल जिसकी हालत बदतर थी। वे एंजेल कास्त्रो वाय अर्गिज़ की तीसरी संतान थे। उनके पिता स्पेन के गरीब इलाके से आये गलिसिंअन अप्रवासी थे, जो चीनी उद्योग में काम करके और सफल निवेश के माध्यम से अपेक्षाकृत समृद्ध बने। उनकी मां, लीना रूज़ गोंजालेज, एक घरेलू नौकर थी। एंजेल कास्त्रो ने मारिया लुइसा अर्गोता नामक एक दूसरी औरत से शादी की। 15 साल की उम्र तक फिदेल को अपनी अवैधता और अपने पिता के घर से दूर विभिन्न पालक घरों से आ रही चुनौतियों का सामना करना पड़ा.

कास्त्रो के दो भाई, रेमन और राउल और चार बहनें, एंजिलीटा, जूआनिटा, इनमा और अगस्तिना हैं, जो सभी विवाह पूर्व पैदा हुए. उनके दो सौतेले भाई बहन, लीडिया और पेद्रो एमिलियो भी है, जिन्हें एंजेल कास्त्रो की पहली पत्नी ने पाला-पोसा.

फिदेल का बप्तिस्मा 8 साल की उम्र तक नहीं हुआ था, जो बहुत असामान्य बात थी, जिस कारण भी अन्य बच्चों के सामने उन्हें शर्मिंदगी उठानी पड़ी और उपहास का पात्र बनना पड़ा. एंजेल कास्त्रो ने आखिरकार अपनी पहली से तलाक ले लिया और फिदेल की मां से शादी कर ली, तब फिदेल 15 साल के थे। जब वे 17 के थे, तब कास्त्रो को औपचारिक रूप से अपने पिता की पहचान मिली और उनका उपनाम कानूनी तौर पर रुज़, जो उनकी मां का उपनाम था, से कास्त्रो हुआ।
हालांकि उनकी शिक्षा के मामले में मतभेद है, ज्यादातर सूत्र सहमत हैं कि वे एक बौद्धिक रूप से प्रतिभाशाली छात्र थे, शिक्षा के बजाय खेलों में वे अधिक रुचि रखते थे। और उनके कई साल एक निजी कैथोलिक बोर्डिंग स्कूल में बीते. हाई स्कूल की पढ़ाई उन्होंने 1945 में हवाना के एक जेसुइट स्कूल El Colegio de Belén से पूरी की। बेलेन में कास्त्रो ने स्कूल में एक बेसबॉल टीम बनाया। वहां लगातार अफवाहें फैलती रही कि कास्त्रो को अमेरिका की विभिन्न बेसबाल टीम द्वारा खोजा जा रहा था,

संयुक्त राज्य अमेरिका द्वारा प्रतिबन्ध
अन्य देश
26 जुलाई का आंदोलन
बचपन और शिक्षा