Tales of Xillia śledzi losy Jude'a Mathisa, młodego studenta medycyny oraz Milly Maxwell, tajemniczej kobiety, której towarzyszą 3 niewidzialne postacie. Na początku swojej przygody gracze wybierają jednego z bohaterów. Akcja gry toczy się w świecie RIEZ MAXI, gdzie ludzie i duchy żyją ze sobą w harmonii. Królestwo Rashugal eksperymentuje z potężnym urządzeniem, które wysysa ze świata niezbędną manę. Milla i Jude zdają sobie sprawę z zagrożenia, jakie to potężne, niszczycielskie urządzenie stanowi dla świata i wyruszają na niełatwe zadanie zniszczenia urządzenia i zwrócenia many do świata, gdzie jest jej miejsce. W swojej misji ratowania świata, Milla i Jude spotykają mnóstwo postaci ze świata RIEZ MAXI, które pomagają im w ich trudnym zadaniu.