부연 설명을 넣을 때는 줄표를 넣어주는 것이 적절합니다. 다음처럼 고칩니다.

내가 자정이 다 됐는데도 귀가하지 않으면 —참고로 그때는 휴대폰은 세상에 나오지 않았을 때인데— 집 인근의 맨홀(manhole)들을 다 살피고 다니셨다고 한다.