ไอน์สไตน์เกิดในเมืองอูล์ม ราชอาณาจักรเวือร์ทเทมแบร์ก สมัยจักรวรรดิเยอรมัน ห่างจากเมืองชตุทท์การ์ทไปทางตะวันออกประมาณ 100 กิโลเมตร ซึ่งในปัจจุบันคือรัฐบาเดิน-เวือร์ทเทมแบร์ก ประเทศเยอรมนี บิดาของเขาชื่อว่า แฮร์มานน์ ไอน์สไตน์ เป็นพนักงานขายทั่วไปซึ่งกำลังทำการทดลองเกี่ยวกับเคมีไฟฟ้า มารดาชื่อว่า พอลลีน โดยมีคนรับใช้หนึ่งคนชื่อ คอช ทั้งคู่แต่งงานกันในโบสถ์ในสตุ๊ทการ์ท (เยอรมัน: Stuttgart-Bad Cannstatt) ครอบครัวของเขาเป็นชาวยิว (แต่ไม่เคร่งครัดนัก) อัลเบิร์ตเข้าเรียนในโรงเรียนประถมคาธอลิก และเข้าเรียนไวโอลิน ตามความต้องการของแม่ของเขาที่ยืนยันให้เขาได้เรียน
เมื่อเขาอายุได้ห้าขวบ พ่อของเขานำเข็มทิศพกพามาให้เล่น และทำให้ไอน์สไตน์รู้ว่ามีบางสิ่งบางอย่างในพื้นที่ที่ว่างเปล่า ซึ่งส่งแรงผลักเข็มทิศให้เปลี่ยนทิศไป เขาได้อธิบายในภายหลังว่าประสบการณ์เหล่านี้คือหนึ่งในส่วนที่เป็นแรงบันดาลใจให้แก่เขาในชีวิต แม้ว่าเขาชอบที่จะสร้างแบบจำลองและอุปกรณ์กลได้ในเวลาว่าง เขาถือเป็นผู้ที่เรียนรู้ได้ช้า สาเหตุอาจเกิดจากการที่เขามีความพิการทางการอ่านหรือเขียน (dyslexia) ความเขินอายซึ่งพบได้ทั่วไป หรือการที่เขามีโครงสร้างสมองที่ไม่ปกติและหาได้ยากมาก (จากการชันสูตรสมองของเขาหลังจากที่ไอน์สไตน์เสียชีวิต) เขายกความดีความชอบในการพัฒนาทฤษฎีของเขาว่าเป็นผลมาจากความเชื่องช้าของเขาเอง โดยกล่าวว่าเขามีเวลาครุ่นคิดถึงอวกาศและเวลามากกว่าเด็กคนอื่น ๆ เขาจึงสามารถสามารถพัฒนาทฤษฎีเหล่านี้ได้ โดยการที่เขาสามารถรับความรู้เชิงปัญญาได้มากกว่าและนานกว่าคนอื่น ๆ
ไอน์สไตน์เริ่มเรียนคณิตศาสตร์เมื่อประมาณอายุ 12 ปี โดยที่ลุงของเขาทั้งสองคนเป็นผู้อุปถัมถ์ความสนใจเชิงปัญญาของเขาในช่วงย่างเข้าวัยรุ่นและวัยรุ่น โดยการแนะนำและให้ยืมหนังสือซึ่งเกี่ยวกับวิทยาศาสตร์และคณิตศาสตร์
ใน พ.ศ. 2437 เนื่องมาจากความล้มเหลวในธุรกิจเคมีไฟฟ้าของพ่อของเขา ทำให้ครอบครัวไอน์สไตน์ย้ายจากเมืองมิวนิค ไปยังเมืองพาเวีย (ใกล้กับเมืองมิลาน) ประเทศอิตาลี ในปีเดียวกัน เขาได้เขียนผลงานทางวิทยาศาสตร์ชิ้นหนึ่งขึ้นมา (คือ "การศึกษาสถานะของอีเธอร์ในสนามแม่เหล็ก") โดยที่ไอน์สไตน์ยังอาศัยอยู่ในบ้านพักในมิวนิคอยู่จนเรียนจบจากโรงเรียน โดยเรียนเสร็จไปแค่ภาคเรียนเดียวก่อนจะลาออกจากโรงเรียนมัธยมศึกษา กลางฤดูใบไม้ผลิ ในปี พ.ศ. 2438 แล้วจึงตามครอบครัวของเขาไปอาศัยอยู่ในเมืองพาเวีย เขาลาออกโดยไม่บอกพ่อแม่ของเขา และโดยไม่ผ่านการเรียนหนึ่งปีครึ่งรวมถึงการสอบไล่ ไอน์สไตน์เกลี้ยกล่อมโรงเรียนให้ปล่อยตัวเขาออกมา โดยกล่าวว่าจะไปศึกษาเป็นนักศึกษาแพทย์ฝึกหัดตามคำเชิญจากเพื่อนผู้เป็นแพทย์ของเขาเอง โรงเรียนยินยอมให้เขาลาออก แต่นี่หมายถึงเขาจะไม่ได้รับใบรับรองการศึกษาชั้นเรียนมัธยม
แม้ว่าเขาจะมีความสามารถชั้นเลิศในสาขาวิชาคณิตศาสตร์และวิทยาศาสตร์ แต่การที่เขาไร้ความรู้ใด ๆ ทางด้านศิลปศาสตร์ ทำให้เขาไม่ผ่านการสอบคัดเลือกเข้าสถาบันเทคโนโลยีแห่งสมาพันธรัฐสวิสในเมืองซูริค (เยอรมัน: Eidgenössische Technische Hochschule หรือ ETH) ทำให้ครอบครัวเขาต้องส่งเขากลับไปเรียนมัธยมศึกษาให้จบที่อารอในสวิตเซอร์แลนด์ เขาสำเร็จการศึกษาและได้รับใบอนุปริญญาในเดือนพฤศจิกายน พ.ศ. 2439 และสอบเข้า ETH ได้ในเดือนตุลาคม แล้วจึงย้ายมาอาศัยอยู่ในเมืองซูริค ในปีเดียวกัน เขากลับมาที่บ้านเกิดของเขาเพื่อเพิกถอนภาวะการเป็นพลเมืองของเขาในเวอร์เทมบูรก์ ทำให้เขากลายเป็นผู้ไร้สัญชาติ
ใน พ.ศ. 2443 เขาได้รับประกาศนียบัตรสำเร็จการศึกษาจากสถาบันเทคโนโลยีแห่งสมาพันธรัฐสวิส และได้รับสิทธิ์พลเมืองสวิสในปี พ.ศ. 2444
งานในสำนักงานสิทธิบัตร
หลังจากจบการศึกษา ไอน์สไตน์ไม่สามารถหางานสอนหนังสือได้ หลังจากเพียรพยายามอยู่เกือบสองปี พ่อของอดีตเพื่อนร่วมชั้นคนหนึ่งก็ช่วยให้เขาได้งานทำที่สำนักงานสิทธิบัตรในกรุงเบิร์น[4] ในตำแหน่งผู้ช่วยตรวจสอบเอกสาร หน้าที่ของเขาคือการตรวจประเมินใบสมัครของสิทธิบัตรในหมวดหมู่อุปกรณ์แม่เหล็กไฟฟ้า ในปี พ.ศ. 2446 ไอน์สไตน์ก็ได้บรรจุเข้าเป็นพนักงานประจำ หลังจากถูกมองข้ามมานานจนกระทั่งกลายเป็นผู้เชี่ยวชาญด้านเทคโนโลยีจักรกล[5]
ไอน์สไตน์กับเพื่อนหลายคนที่รู้จักกันในเบิร์น ได้รวมกลุ่มกันเป็นชมรมเล็กๆ สำหรับคุยกันเรื่องวิทยาศาสตร์และปรัชญา ตั้งชื่อกลุ่มอย่างล้อเลียนว่า "The Olympia Academy" พวกเขาอ่านหนังสือร่วมกันเช่น งานของปวงกาเร แม็ค และฮูม ซึ่งส่งอิทธิพลต่อแนวคิดด้านวิทยาศาสตร์และปรัชญาของไอน์สไตน์มาก[6]
ตลอดช่วงเวลาเหล่านี้ ไอน์สไตน์แทบจะไม่ได้เข้าไปข้องเกี่ยวใดๆ กับชุมชนทางฟิสิกส์เลย[7] งานที่สำนักงานสิทธิบัตรของเขาโดยมากจะเกี่ยวกับปัญหาเรื่องการส่งสัญญาณไฟฟ้าและการซิงโครไนซ์ทางเวลาระหว่างระบบไฟฟ้ากับระบบทางกล ซึ่งเป็นสองปัญหาหลักทางเทคนิคอันเป็นจุดสนใจของการทดลองในความคิดยุคนั้น ซึ่งในเวลาต่อมาได้ชักนำให้ไอน์สไตน์ไปสู่ผลสรุปอันลึกซึ้งเกี่ยวกับธรรมชาติของแสงและความเกี่ยวพันพื้นฐานระหว่างอวกาศกับเวลา[5][6]