Николай Гяуров има интерес към музиката от ранна възраст, а по време на военната си служба пее и ръководи самодеен хор, като с това прави впечатление на Петко Стайнов. Учи оперно пеене в Софийската консерватория при Христо Бръмбаров, а през 1950 г. продължава обучението си в Ленинград, а след това и в Москва.
Кариерата на Гяуров започва през 1955 г., когато печели голямата награда на престижния конкурс за оперни певци в Париж. Прави дебюта си в Софийската народна опера на 18 март 1956 г. като Дон Базилио в "Севилският бръснар" на Джоакино Росини. През есента на същата година заминава за Москва, където няколко сезона работи в Болшой театър.
През 1960 година Гяуров участва в постановка на "Борис Годунов" в миланския театър "Ла Скала", в която участват и двама други изтъкнати български певци - Борис Христов като Борис Годунов и Димитър Узунов като Самозванеца. Този спектакъл става повратна точка в кариерата му, донасяйки му поредица ангажименти в "Ла Скала", които го превръщат за дълго в постоянен водещ бас на театъра.
Той изпълнява роли и във виенската Щатсопера, парижката Гранд опера, лондонската Ковънт гардън, нюйоркската Метрополитън опера, както и в много други престижни театри.
От първата си съпруга Златина Мишакова има две деца - диригентът Владимир Гяуров и актрисата Елена Гяуров. От 90-те години Гяуров живее и работи със своята втора съпруга - италианската певица Мирела Френи, в Модена, Италия. През този период той се ориентира към участия в концертни програми с нея в градове по целия свят.