В 1932 г. окончил рабочий факультет при Одесском медицинском институте, после чего поступил в тот же институт, окончив его с отличием в 1937 г., затем – аспирантуру при Винницком медицинском институте в 1941 г.
С 1946 по 1958 гг. трудовой путь Я.Д. Гольденцвайга связан с научной и преподавательской деятельностью сначала в Свердловском, а затем Смоленском медицинских институтах.
В 1958 г. утвержден заведующим кафедрой пропедевтики внутренних болезней Читинского медицинского института. Я.Д. Гольденцвайг организовал клиническую базу в городской больнице № 1, читал курс лекций для студентов с использованием современных достижений отечественной и зарубежной медицинской науки. Особое внимание уделял практическим навыкам, создавая условия для плодотворной научно-исследовательской работы. Консультировал больных в клиниках института и лечебных учреждениях области. Проводил большую общественную работу: в течение 10 лет был бессменным председателем Читинского отделения Всесоюзного общества терапевтов, председателем 1-ой клинической терапевтической методической комиссии. Будучи членом научной курортной комиссии, проводил большую работу на курортах Забайкалья, консультировал больных на курорте Дарасун. Проводил научные исследования по изучению механизмов фармакологического действия ингибиторов карбоангидразы при хронической сердечной недостаточности, динамики показателей свертываемости крови у больных с расстройством кровообращения, атеросклерозе при кислородной терапии и др. В 1973 г. за хорошую работу по подготовке врачебных кадров и оказание медицинской помощи был награжден знаком «Отличник здравоохранения».
Автор более 50 научных статей.

С июля 1941 по 1946 гг. служил военным врачом 3-го ранга в действующей армии: ординатором госпитального взвода 520-го отдельного медико-санитарного батальона 417-й стрелковой дивизии, затем эвакуационного госпиталя 1628. После окончания курсов усовершенствования медицинского состава Закарпатского военного округа (г. Тбилиси) был назначен командиром госпитального взвода 520-го отдельного медико-санитарного батальона 417-й стрелковой дивизии на Закавказском фронте. В1945 – 1946 гг. служил помощником начальника лаборатории авиамедицины в Свердловске.

Награжден двумя орденами Красной Звезды, медалью «За победу над Германией в Великой Отечественной войне 1941–1945 гг.».