Когда вы открываете файл, как компьютер может понять, что это не просто текстовый файл, а файл HTML? Как и со всеми другими файлами, компьютер смотрит на расширение файла. Так получилось, что есть целых два расширения, которые обозначают HTML: .htm и .html. 

Самый простой способ создать HTML файл - создадить текстовый файл (а это расширение .txt), и потом переименовать его расширение из txt => html.

Если у вас в Explorer выключено отображение расширения у файлов - включите его.