Байт - это 8 бит подряд. С помощью одного бита можно обозначить только два числа: 0 и 1. 
С помощью 2 бит уже можно обозначить 4 числа: 0, 1, 2 и 3 (как? "00"=0, "01"=1, "10"=2, "11"=3)
С помощью 3 бит можно обозначить целых 8 чисел: от нуля до семи.
А с помощью 8 бит можно обозначить целых 256 чисел: от нуля до 255. Часто компьютеры работают именно с байтами - небольшими числами.