1930年8月12日，在匈牙利首都布達佩斯的一戶猶太人家庭裏，一個瘦弱的男嬰降生了，他的匈牙利名字叫迪斯德茲·索亞，後來這個名字被英文化了，即成了鼎鼎大名的喬治·索羅斯。
初生的索羅斯與其他嬰兒沒有任何不同，他在父母的關切下，一天天長大了。
索羅斯的父親狄華達是一名律師，在當地人的眼中，狄華達長得帥，體格健壯，愛好運動，尤其是他那雙飄忽迷離的眼睛、揮金如土的豪氣，再加上無論何種情況下都能生存下去的生活態度，這些都是附近出了名的。但在小喬治的眼中，“我父親並不工作，他隻是在賺錢。”他一直這樣認為。
母親伊麗莎白與父親性格迥然不同，狄華達個性大大咧咧，不時有點浮躁，熱衷於交際，母親則喜歡安靜，樂於鑽研。由於自身喜愛雕刻、繪畫、音樂和文學，伊麗莎白也把這些愛好試圖灌輸給她的孩子們，小喬治·索羅斯也喜歡塗塗抹抹，但對音樂的興趣卻不大。一家人都說匈牙利語，同時索羅斯也掌握了德語、英語和法語。索羅斯後來對哲學有濃厚的興趣，可能也來源於母親的影響。
因為性格上的差異，父母親在生活中不時有些小摩擦。狄華達揮金如土，漠視一切工作，伊麗莎白努力操持家庭生活，她盡量讓自己不與丈夫爭吵，但有時仍避免不了鬥嘴吵架的事件發生。
喬治·索羅斯隻有一個同胞兄弟，即比他大四歲的哥哥——保羅。
從外貌上看，小喬治有著金色的頭發和藍色的眼睛，長得更像母親，而不像有著“黑色”特征的父親。這幫他們一家在二戰中躲避災難起到了重要作用。“你不像猶太人。”每當童年夥伴們這樣說時，小喬治就會非常高興。因為當時猶太教受排斥的地位，索羅斯家族極力避免提到自己的宗教根源，甚至狄華達曾花很長時間去努力學做一名基督教士。
當索羅斯出生的時候，他的父親狄華達已經經曆過人生中一段極為可怕的時期，作為一名第一次世界大戰中的匈牙利戰犯，狄華達在國外度過了三年顛沛流離的生活——1917年到1920年國內戰爭。內戰時期，他在西伯利亞東奔西跑以求活命，隻要能夠生存下去，多麼令人痛苦的事情都嚐試過。
日後每當回憶起那段充滿危險的日子，狄華達總是告訴孩子們，在戰爭年代任何事情都有可能發生，幾乎全無生存的希望，每個人都是九死一生。這些話在索羅斯心中留下了沉重的印記，他知道自己的父親是一個聰明且精明的人，憑借自身的聰明才智超過了許多人。年幼的索羅斯視自己的父親為天神。
狄華達對索羅斯傾注了大量的關愛，他常常與索羅斯交談，告訴他一些人生的秘密，讓他領悟到其中的重要意義。與其他家長不同，狄華達並不試圖把孩子固定在自己的價值觀內，而是支持孩子有自己的想法，他使索羅斯確認，男孩子應當知道日後要克服巨大的困難，要知道如何能麵對複雜多變、動蕩不安的局勢。這些都使索羅斯養成了一種習慣，善於尋求非同尋常的辦法去解決問題。
索羅斯與其他同齡的孩子們一樣，非常喜歡運動，他在各項體育活動中表現出類拔萃，尤其擅長遊戲、網球和航海。在他們居住的洛拔島共有40戶人家，就有兩個網球場，這已經是非常奢侈的了。索羅斯並不喜歡英式足球，他認為那不是中上等的運動。
索羅斯常與附近的夥伴們一起玩耍，很多遊戲他都喜歡。但他的同學們卻說：“喬治非常喜歡捉弄人！”在孩子們的公認中，喬治和李提文是最壞的，後來喬治·索羅斯成了舉世矚目的高級金融家，李提文成為了曆史學家。
除了對各式各樣的運動充滿無限好奇心，索羅斯特別喜歡與人談論《資本論》。
當在所有遊戲中所向無敵後，他開始感到厭倦，為了能使遊戲有新的可玩性，他采用了新的規則，其中之一就是在遊戲中加上股票交換，並且他給這個遊戲取了個特別的名字“資本家”。索羅斯使用這個名字，可能就是受了《資本論》一書的影響，他當時已經開始閱讀，但能不能懂，對於一個孩子來說並不重要。
索羅斯非常喜歡這項新的、帶有賭博性質的遊戲，體會到了從來沒有過的樂趣，這個遊戲他玩了很長時間。對於改變規則，成年後的索羅斯說：“我喜歡改變遊戲規則，當然，那是在完全掌握了遊戲的原有規則之後才去做的事——那會讓我更加得心應手。投資也是一種遊戲，它的規則也可以是理性的。”