고민하시는 부분은 퍼비콘이라 불리는 아이콘이며,
<link rel="icon" href="/favicon.ico" type="image/x-icon">
요런 방법으로 html태그의 head 태그 사이에 넣어주면 됩니다.

당연히 favicon.ico파일이 홈페이지 해당 경로에 위치해야됩니다.
또한 이미지를 포토샵에서 아이콘형으로 제작을 하거나
https://www.favicon.cc/ 와 같이 이미지를 퍼비콘으로 변환해주는 사이트를 활용할수 있습니다.