Отец мечтал, чтобы старший сын поступил в университет: «Титул „бакалавр" так великолепно сочетался бы с нашей фамилией!» Но Пол, узнав о планах отца, нарочно начал учиться плохо, перестал готовить домашние задания.
В семье Маккартни звучало много музыки. В доме было пианино, и Джим часто играл на нем популярные и модные джазовые мелодии. Джим единственный из родителей «Битлз» в молодости был музыкантом-профессионалом. Когда ему было 17 лет, он организовал небольшой джаз-оркестр, который играл на танцплощадках. На фортепиано и других инструментах он научился играть самостоятельно еще в детстве. В 30 лет Джеймс Маккартни руководил уже довольно большим джаз-оркестром «Джим Мак джаз бэнд». Оркестр играл на вечеринках в рабочих клубах, а иногда даже сопровождал немые кинофильмы. «Джим Мак джаз бэнд» и его элегантный руководитель во фраке, котелке и белой манишке пользовались большим успехом, особенно у представительниц прекрасного пола. Он сам писал песни. Одну из них, «Walking in The Park With Eloise» («Гуляя по парку с Элоизой»), записал в 1972 году его знаменитый сын со своим ансамблем «Уингз».
В семьях родственников и знакомых Маккартни часто устраивались вечеринки. Родители брали на эти семейные встречи детей. Пол вспоминает, что один из его дядюшек играл на трубе и пел что-то вроде рок-н-ролла. Полу это очень нравилось. Когда мальчик стал постарше, дядюшка подарил и ему трубу, и Пол быстро научился подбирать на ней разные мелодии.
Полу было уже 13 лет, когда семья наконец переехала в отдельный дом на Фортлин-роуд в Аллертоне, в двух милях (1 миля равна 1 км 609 м) от «Мендипс», где жил Джон Леннон. Джим получил этот дом от муниципалитета за добросовестную работу. Однако радовалась семья недолго. Неожиданно заболела Мэри. Она уже давно испытывала боли, но не обращалась к врачам. Летом 1956 года ее состояние резко ухудшилось. У нее обнаружили запущенный рак груди. Операция только ускорила кончину. Полу тогда только что исполнилось четырнадцать.
Для Джима смерть любимой жены была страшным ударом. Он потерял интерес к жизни, не мог заниматься детьми. Денег в доме не было — Джим зарабатывал всего 8 фунтов в неделю. Он не представлял, как жить без заработка Мэри. Мальчики были уже взрослыми, их нужно было одевать, кормить, продолжать учить. Джим не допускал и мысли, чтобы отправить их работать. Он мечтал, чтобы Пол стал преподавателем, тем более, что он был таким способным.
