Занимает площадь 212 км², что делает его вторым по величине в архипелаге и одиннадцатым в Шотландии. Омывается на юго-востоке Северным морем, на северо-западе Атлантическим океаном. По переписи населения 2001 года на острове проживает 957 жителей, при средней плотности населения 4,5 жителя на км². Это пятнадцатый по количеству населения остров Шотландии, и третий в группе Шетландских островов, после Мейнленда и Уолси. Наивысшая точка — гора Эрисдейл, 210 метров над уровнем моря.
Остров в частности и Шетландские острова в целом являются границей между северной частью Северного моря на востоке и Атлантикой на западе. Через восточную часть острова проходит 1-й меридиан западной долготы.
Йелл растянулся в меридиональном направлении на 31 километр, с максимальной шириной в 12 километров. На северо-востоке Йелл отделен узким проливом Блюмалл-Саунд от острова Анст, а на юго-западе — проливом Йелл от Мейнленда. Восточный берег острова, как правило, низкий и песчаный, западный же скалистый, возвышающийся до высоты 60—120 метров. Остров разрезают несколько бухт, образующих природные гавани. Существует также целый ряд песчаных кос, соединяющих полуострова с основной частью острова. Многие из них очень недолговечны и могут быть легко повреждены в результате эрозии, вызванной человеческой деятельностью, или суровыми штормами, создавая новые острова или возрождая старые. На острове мало возделываемых земель, но прибрежные воды богаты рыбой.
Большая часть внутренней части острова покрыта слоем торфа толщиной в три метра, который является результатом отложений, продолжавшихся три тысячелетия. Торф способен удерживать большое количество воды, но он сильно подвержен эрозии, особенно вблизи берегов.
Остров Йелл окружён небольшими островками: Бигга, Глуп-Холм, Ери-Линги, Линга, Ламба, Литтл-Ро, Литтл-Холм, Макл-Холм, Орфасей, Остров Бразер, Саунд-Грюней, скала Эрн, Уйэя, Фиш-Холм, Хааф-Грюней, Хаскосей, Юнари и изрезан небольшими заливами, бухтами: Барра, Баста, Мид-Йелл, Оттерс.
Населённые пункты: Баста, Берраво, Гатчер, Глуп, Калливо, Копистер, Мид-Йелл, Оттерсуик, Улста, Уэст-Сэндуик, Эйуик.