พระเวสสันดรไม่ทรงประสงค์ให้พระนางมัทรีติดตามพระองค์ไปเพราะการเดินทาง ไปจาก พระนครย่อม มีแต่ความยากลำบาก ทั้งพระองค์เองก็ทรงปรารถนา
จะเสด็จไปประทับบำเพ็ญ ศีลภาวนาอยู่ในป่าพระนางมัทรีไม่คุ้นเคยต่อ สภาพเช่นนั้น ย่อมจะต้องลำบากยากเข็ญทั้ง อาหารการกินและความเป็นอยู่ แต่ไม่ว่า พระเวสสันดรจะตรัสห้ามปรามอย่างไร นาง ก็มิยอมฟัง บรรดาพระประยูรญาติ ก็พากัน อ้อนวอนขอร้อง พระนางก็ทรงยืนกรานว่า
จะติดตามพระราชสวามีไปด้วยพระนางผุสดีจึงทรงไปทูลขอพระเจ้าสญชัย
มิให้ขับพระเวสสันดรออกจากเมืองพระเจ้า สญชัยตรัสว่า
"บ้านเมืองจะเป็นสุขได้ก็ต่อ เมื่อราษฏรเป็นสุข พระราชาจะเป็นสุขได้ก็
เมื่อราษฏรเป็นสุข ถ้าราษฏรมีความทุกข์ พระราชาจะนิ่งเฉยอยู่ได้อย่างไร
ราษฏรพากันกล่าวโทษพระเวสสันดรว่าจะทำให้บ้านเมือง ยากเข็ญ เราจึง
จำเป็นต้องลงโทษ แม้ว่าพระเวสสันดรจะเป็นลูกของเราก็ตาม
" ไม่ว่าผู้ใดจะห้ามปรามอย่างไร พระนางมัทรี ก็จะตามเสด็จพระเวสสันดร
ไปให้จงได้ พระเจ้าสญชัยและ พระนางผุสดีจึงของเอา พระชาลี พระกัณหา
โอรสธิดาของพระเวสสันดรไว้ แต่พระนางมัทรีก็ไม่ยินยอม ทรงกล่าวว่า
"เมื่อชาวเมืองสีวีรังเกียจพระเวสสันดร ให้ขับไล่ไปเสียดังนี้ พระโอรสธิดาจะอยู่
ต่อไปได้อย่างไร ชาวเมืองโกรธแค้นขึ้นมา พระชาลีกัณหาก็จะทรงได้รับ
ความลำบาก จึงควรที่จะออกจากเมือง ไปเสียพร้อม พระบิดาพระมารดา" ในที่สุดพระเวสสันดร พร้อมด้วยพระมเหสี และโอรสธิดาก็ออกจากเมืองสีวีไป แม้ใน ขณะนั้นชาวเมือง ยังตามมาทูลขอรถพระที่นั่ง ทั้งสี่พระองค์จึงต้อง
ทรงดำเนินด้วยพระบาทออก จากเมืองสีวีมุ่งไปสู่ป่า เพื่อบำเพ็ญพรตภาวนา ครั้นเสด็จมาถึงเมืองมาตุลนคร บรรดากษัตริย์ เจตราชทรงทราบข่าว จึงพากันมาต้อนรับ พระเวสสันดร ทรงถามถึงทางไปสู่เขาวงกต กษัตริย์
เจตราชก็ทรงบอกทางให้และเล่าว่า เขาวงกตนั้นต้องเดินทางผ่าน ป่าใหญ่ที่เต็ม ไปด้วยอันตราย แต่เมื่อไปถึงสระโบกขรณีแล้ว ก็จะเป็นบริเวณร่มรื่นสะดวกสบาย มีต้นไม้ผล
