본문으로 이동

데이비드 러멜하트

위키백과, 우리 모두의 백과사전.

데이비드 에버렛 러멜하트 (David Everett Rumelhart, 1942년 6월 12일 – 2011년 3월 13일)는 수학 심리학, 상징적 인공 지능, 병렬 분산 처리의 틀 안에서 주로 작업하며 인간 인지의 형식적 분석에 많은 공헌을 한 미국의 심리학자이다. 그는 또한 인지에 대한 형식적 언어학적 접근 방식을 높이 평가했고, 이야기의 구조를 포착하기 위한 형식 문법을 공식화할 가능성을 탐구했다.[1]

초기 생애와 교육

[편집]

러멜하트는 1942년 6월 12일 사우스다코타주 미첼에서 태어났다.[2] 그는 사우스다코타 대학교에서 대학 교육을 시작하여 1963년에 심리학수학으로 학사 학위를 받았다. 그는 스탠포드 대학교에서 수리심리학을 공부하여 1967년에 박사학위를 받았다.

경력

[편집]

그는 1967년부터 1987년까지 캘리포니아 대학교 샌디에이고 캠퍼스의 심리학과에서 교수로 재직했다. 그는 1987년에 스탠포드 대학교로 옮겨 1998년까지 교수로 재직했다.

러멜하트는 1991년에 미국 과학 아카데미 회원으로 선출되었고, 1987년 7월 맥아더 펠로우십, 실험 심리학자 협회의 워렌 메달, APA 우수 과학 공헌상 등 많은 상을 수상했다.[3]

개인 생활

[편집]

러멜하트는 진행성 신경퇴행성 질환으로 장애를 입었고 생애 마지막에는 미시간주 앤아버에서 형과 함께 살았다. 그는 미시간주 첼시에서 사망했다. 그는 두 아들을 남겼다.[4]

작업

[편집]

러멜하트는 1985년에 발표된, 다층 신경망에 역전파 알고리즘을 적용한, 많이 인용된 논문의 첫 번째 저자였다.[5](제프리 힌턴과 로널드 윌리엄스가 공동 집필) 이 연구는 실험을 통해 이러한 네트워크가 데이터의 유용한 내부 표현을 학습할 수 있음을 보여주었다. 이 접근 방식은 기본적인 인지 연구(예: 기억, 시각적 인식)와 실용적 응용 분야에 널리 사용되었다. 1985년 논문은 폴 웨르보스의 1974년 논문과 같은 역전파의 이전 출판물을 인용하지 않았다.[6] 그들은 이전 출판물을 알지 못했기 때문이다.[7]

러멜하트는 1982년경에 독립적으로 역전파를 개발했다.[8] 1983년에 그는 이를 이용하여 볼츠만 머신(1983년 개발)보다 훨씬 빠르게 훈련할 수 있다는 것을 발견했다.[9] 그러나 제프리 힌턴은 역전파를 수용하지 않고 볼츠만 머신을 선호했으며 1년 후에야 역전파를 수용했다.[10]

같은 해에 러멜하트는 제임스 매클레런드와 함께 《병렬 분산 처리: 인지의 미세 구조 탐구》(Parallel Distributed Processing: Explorations in the Microstructure of Cognition)을 출판했다.[11] 이 책에서는 퍼셉트론의 컴퓨터 시뮬레이션을 만드는 방법을 설명했으며, 컴퓨터 과학자들에게 신경 처리에 대한 최초의 테스트 가능한 모델을 제공했다. 이 책은 현재 인지 과학 분야의 핵심 텍스트로 여겨진다.[12]

1986년 매클레런드와의 작업은 1980년대 신경망의 부활 동안 "과거형 논쟁"을 불러일으켰다.[13] 연결주의 측은 제리 포더, 스티븐 핑커 등이 대표하는 상징주의 측에 대해 논쟁을 벌였다. 논쟁은 영어 화자가 동사를 과거 시제로 바꿀 수 있는 방법에 대한 적절한 모델이 신경망인지 상징적 프로그램인지에 대한 것이었다.[14][15]

러멜하트의 다양한 학습 영역에서 계층적이지 않은 뉴런과 같은 처리 장치를 사용하여 의미 인지와 특정 지식을 구축한 모델은 인공지능, 인류학, 정보과학, 의사결정과학 분야의 과학자들에게 지속적으로 관심을 불러일으켰다.

각주

[편집]
  1. Carey, Benedict (2011년 3월 18일). “David Rumelhart Dies at 68; Created Computer Simulations of Perception”. 《The New York Times》. 
  2. “Profile details: David Everett Rumelhart”. Marquis Who's Who. 
  3. “David E. Rumelhart: A Scientific Biography”. 2013년 10월 30일에 원본 문서에서 보존된 문서. 2016년 2월 3일에 확인함. 
  4. “Profile details: David Everett Rumelhart”. Marquis Who's Who. 
  5. Rumelhart, David E.; Hinton, Geoffrey E.; Williams, Ronald J. (1986년 10월 9일). “Learning representations by back-propagating errors”. 《Nature》 (영어) 323 (6088): 533–536. Bibcode:1986Natur.323..533R. doi:10.1038/323533a0. ISSN 1476-4687. 
  6. Werbos, Paul (November 1974). 《Beyond regression: New tools for prediction and analysis in the behavioral sciences》 (PhD). Harvard University. 
  7. Chapter 12. Rosenfeld, Edward, and James A. Anderson, eds. 2000. Talking Nets: An Oral History of Neural Networks. Reprint edition. The MIT Press.
  8. Chapter 12. Rosenfeld, Edward, and James A. Anderson, eds. 2000. Talking Nets: An Oral History of Neural Networks. Reprint edition. The MIT Press.
  9. Chapter 14. Rosenfeld, Edward, and James A. Anderson, eds. 2000. Talking Nets: An Oral History of Neural Networks. Reprint edition. The MIT Press.
  10. Chapter 16. Rosenfeld, Edward, and James A. Anderson, eds. 2000. Talking Nets: An Oral History of Neural Networks. Reprint edition. The MIT Press.
  11. David E. Rumelhart; James L. McClelland; PDP Research Group (1987). 《Parallel Distributed Processing: Explorations in the Microstructure of Cognition》. ISBN 9780262680530. 2016년 2월 3일에 확인함. 
  12. Carey, Benedict (2011년 3월 18일). “David Rumelhart Dies at 68; Created Computer Simulations of Perception”. 《The New York Times》. 
  13. Rumelhart, D. E.; McClelland, J. L. (1986). 〈On learning the past tenses of English verbs〉. 《Parallel distributed processing: explorations in the microstructure of cognition, vol. 2: psychological and biological models》. Cambridge, MA, USA: MIT Press. 216–271쪽. ISBN 978-0-262-13218-3. 
  14. Seidenberg, Mark S.; Plaut, David C. (August 2014). “Quasiregularity and Its Discontents: The Legacy of the Past Tense Debate”. 《Cognitive Science》 (영어) 38 (6): 1190–1228. doi:10.1111/cogs.12147. ISSN 0364-0213. PMID 25104139. 
  15. Pinker, Steven. "Four decades of rules and associations, or whatever happened to the past tense debate." Language, the brain, and cognitive development: Papers in honor of Jacques Mehler (2001): 157-179.