Можно ли сделать хедер один раз, и подключать его к остальным страницам

Конкретно в html нет. Это привилегия сайтов с backend'ом. В разных языках и фреймворках это реализуется по разному.