Non lo so di preciso, una volta entrato nel castello se esci nella world map non potrai fare proprio tutte tutte le cose che facevi prima.
Ti conviene completare tutto prima del Lunatic Pandora.