Фрейзер изучал игру на барабанах у нескольких новоорлеанских джазовых музыкантов, в том числе у Луи Коттрелла-старшего , Red Happy Bolton и Face-O Woods. Он присоединился к группе Golden Rule Band вместе с двоюродным братом Лоуренсом Марреро в 1921 году и играл в оркестре молодых смокингов Марреро в 1920-х годах. Он записывался с духовым оркестром Tuxedo Papa Celestin в 1927 году и играл с AJ Piron и Sidney Desvigne в конце 1920-х и начале 1930-х годов. Во время Великой депрессии Фрейзер играл в группах WPA и в танцевальных группах Navy . В 1945 году он записал сВуден Джо Николас и работал в 1950-х годах с Селестином, Перси Хамфри , Джорджем Уильямсом и духовым оркестром Eureka . Он играл в джаз-бэнде Preservation Hall в 1960-х, работал там до 1980-х, а последние несколько десятилетий записывался с Кидом Ховардом , Де Де Берком , Джорджем Льюисом , Эмилем Барнсом , капитаном Джоном Хэнди и Доном Юэллом . Он появляется в фильме Стива МакКуина «Малыш из Цинциннати» и даже играл на одной из сессий Хелен Редди .