Лоджию утеплять определенно стоит, особенно если планируете там проводить много времени. Рекомендую начать с остекления качественными стеклопакетами, затем утеплить пол, стены и потолок. Из материалов хорошо себя показывают пенополистирол или минеральная вата. Главное - не забыть про гидроизоляцию и вентиляцию.