Эллен, сестра Алисии, не была расположена к такому милосердию и предприимчивости; она пробыла послушницей восемь месяцев и решила оставить призвание по причине слабого здоровья. Ее отец вознамерился найти ей мужа, и священник предложил сосватать Джеймса Огастина Джойса, тогда двадцатиоднолетнего, то есть намного младше Эллен. Жена постарше и порешительнее могла его утихомирить — так полагали участники этого предприятия. Он в те годы был слишком буен, чтобы преуспеть — «самый красивый мужчина в Корке», как говорил его сын Джон, и отличный охотник. Свадьба состоялась 28 февраля 1848 года и принесла Джеймсу немало выгод, включая тысячу фунтов приданого и близкое знакомство с такими заметными людьми, как старшие двоюродные братья Эллен — Джон Дэли и Питер Пол Мак-Суини, впоследствии соответственно лорд-мэр Корка и лорд-мэр Дублина.
Их единственное дитя, Джон Станислаус Джойс, родился 4 июля 1849 года. Первое его имя, скорее всего, дано в честь Джона О’Коннела, а второе, Станислаус — в честь польского святого Станислава Костки, одного из трех покровителей благочестивой юности. В этом отразилась симпатия его отца к борьбе католической Польши за освобождение. Ни женитьба, ни рождение сына не образумили Джеймса Огастина Джойса — за банкротством 1852 года последовала новая запись о банкротстве. Но ему помогали обе семьи, и скоро он перевез жену и ребенка в модный пригород Корка Сандейз-Уэлл. Без сомнения, благодаря этой же поддержке он получил солидную и не слишком обременительную должность инспектора налоговых сборов, которая значится в его свидетельстве о смерти.
Со своим сыном Джоном он ладил очень хорошо, относясь к нему так же снисходительно, как относились к нему. Когда мальчику исполнилось десять, его послали в колледж Сент-Колман в Фермое, существовавший тогда всего второй год — у Джойсов были там знакомства. Джон оставался в школе недолго: поступив 17 марта 1859 года, он был выписан 19 февраля 1860-го. Архив колледжа подтверждает, что он получил также отдельные уроки фортепиано и пения и, наверное, уже продемонстрировал первые признаки того прекрасного тенора, которым впоследствии справедливо гордился. Но здоровьем он был некрепок — страдал ревматической лихорадкой, потом заболел тифом, и отец решил забрать его. Те же архивные записи констатируют, что семь фунтов платы за обучение так никогда и не были внесены. Задолженность эту Джон Джойс вынужден был погасить тридцать лет спустя, когда забирал из Кпонгоувз своего сына Джеймса.
