年輕的太子，長得是儀表堂堂，因此，常有很多貴門的少女，王族的千金，想博得他的寵愛。
豪華的宴會，歡狂的歌舞，一日都不停息的煩擾着太子。
淨飯大王的心中也是這樣的打算，他以為唯有這樣才可以使太子不緻生起出家的念頭，使阿私陀仙的預言不至于成為事實。
然而太子為這些歌舞宴會，反而增添不少的憂郁與厭惡。
淨飯大王見到如此情形，更是憂愁萬分！
他想：太子的品性，高尚忠厚，是國民崇拜敬仰的；太子的武藝，超群英勇，是鄰國聞名而畏懼的。
想不到這麼一位賢德的太子，竟把榮華富貴看得那麼沒有價值。
淨飯大王想改變太子這郁郁不樂的性情，除了用财寶女色之外，又想不出其它的辦法。
他命令集合全國有名的建築工程專家營造四時宮殿，讓太子沒有春去秋來的感覺，裡面終日不是管弦樂聲，就是豪華歌舞，但是，這一切的一切，仍然不能增加太子的歡心！
這不是沒有原因，聰明的太子，雖然深居在内宮之中，但他已體察到當時印度社會階級懸殊的情形。
他懷疑人與人之間為什麼會那樣的不平等？勞苦的大衆為什麼不能獲得美滿的生活和自由？如何改造這不平等的社會？這個問題早已盤旋在悉達多太子的心中。
而且，他猶記得幼時被父王帶去視察農村社會的情形。
在農村裡，見到人人都是流着汗珠在辛勤的勞動，烈日當空，也得不到休息。
而父王和自己卻傘蓋車馬，任意的逍遙，這是多麼的不公平！
還有，他見到那些農田被掘翻的土内，有許多大大小小的昆蟲，正當他們要往土裡攢的時候，卻被群鳥飛來争先恐後的啄食。
弱肉強食，這是多麼的殘酷和無情！這是多麼的恐怖和痛苦！
在這時候的太子，他并不是厭惡這世間，也不是憂愁自己沒有快樂，而是目睹社會的不平，衆生的痛苦，所以郁積在心頭的愁思，始終不能釋去。