책 목록으로 돌아가기

**저자**: Stephen Witt (《How Music Got Free》 저자, *The New Yorker* 기자)

The Thinking Machine: Jensen Huang, Nvidia, and the World's Most Coveted Microchip

저자: Stephen Witt (《How Music Got Free》 저자, The New Yorker 기자) 출판: 2025년, Viking/Bodley Head 분량: 242페이지 (23챕터) 핵심 명제: Nvidia의 $3조 도달은 "운이 좋았다"가 아니라, 병렬 컴퓨팅이라는 외로운 베팅을 수십 년간 밀어붙인 Jensen Huang의 냉철한 사업 논리의 산물이다.

1부: 그래픽에서 범용 컴퓨팅으로 (1993~2012)

Nvidia 창업 (1993)

• Jensen Huang(황젠슨), Chris Malachowsky, Curtis Priem이 Denny's 식당에서 공동 창업
• 황젠슨: 대만 출생 → 태국 성장 → 9세에 미국 켄터키 기숙학교 → 오리건주립대(전기공학) → AMD·LSI Logic 경력
• 창업 시 핵심 베팅: "PC 그래픽 시장은 폭발할 것, 우리는 병렬 컴퓨팅으로 승부한다"

초기 실패와 피벗

• NV1 (1995): 독자 아키텍처 채택 → 업계 표준 불일치, 상업적 실패
• NV3 (1997): 업계 표준(OpenGL/Direct3D) 채택으로 전환 → 3dfx 경쟁에서 승리
• 3dfx 인수: 경쟁사를 직접 흡수해 GPU 시장 지배력 확보
• IPO: 1999년 1월 22일 상장

CUDA 개발 — 도박이자 전략 (2006)

• GPU는 원래 게임 렌더링용 병렬 프로세서
• 황젠슨의 관찰: "연구자들이 이미 GPU로 계산을 돌리고 있다 — 공식 지원이 없는데도"
• CUDA (Compute Unified Device Architecture): GPU를 범용 과학 계산 플랫폼으로 여는 소프트웨어 스택 (Ian Buck 주도)
• 당시 극소수 연구자들만 사용, 매출 직결 없음 — 수년간 "낭비" 논란

AlexNet — AI 혁명의 빅뱅 (2012)

• Alex Krizhevsky, Ilya Sutskever, Geoffrey Hinton이 ImageNet 대회에서 26%→15% 오류율 점프
• 핵심 도구: 두 장의 GTX 580 GPU (CUDA 기반)
• 황젠슨이 직접 결과를 추적, "이게 바로 O.I.A.L.O.다" 선언
• O.I.A.L.O. (Once In A Lifetime Opportunity): 회사 전체를 AI 컴퓨팅으로 피벗하는 신호

2부: AI 혁명의 인프라가 되다 (2012~2024)

cuDNN과 DGX-1

• Bryan Catanzaro: CUDA 위에 딥러닝 전용 라이브러리 cuDNN 개발 → 딥러닝 속도 10배 향상
• DGX-1 (2016): Nvidia 최초 AI 전용 서버 — 황젠슨이 직접 첫 번째 유닛을 OpenAI에 기증
• Sam Altman에게 "이게 미래다"라며 전달한 행위는 AI 생태계 구축 전략의 일환

Transformer 아키텍처와 Nvidia

• 2017년 Google의 "Attention Is All You Need" 논문 → [[papers/attention-is-all-you-need]]
• Transformer는 병렬 연산에 극도로 최적화 → GPU 수요 폭발의 직접 원인
• Nvidia는 Transformer를 설계하지 않았지만, 이를 실행하는 유일한 하드웨어 공급자가 됨

Mellanox 인수 (2019)

• 고속 네트워킹 기업 인수 ($6.9B)
• AI 클러스터 내 GPU 간 데이터 전송 병목 해소 → 거대 모델 훈련 가능성 확보

ChatGPT → $3조 (2022~2024)

• 2022년 11월 ChatGPT 공개 → AI 인프라 수요 수직 상승
• 모든 클라우드 기업이 Nvidia H100 칩 주문 쟁탈전
• 2024년 시가총액 $3조 돌파 — 마이크로소프트·애플과 어깨를 나란히
• IPO 대비 주가 상승률: 300,000%

GTC 2024 키노트

• NHL 아레나(17,000석) 수용 — 8,000명은 입장 불가, 시뮬캐스트로 시청
• Nvidia의 컴퓨팅 스택을 손으로 그린 지도로 설명: IBM S/360 (1964) → 병렬 컴퓨팅 혁명
• 로봇 학습 플랫폼 GR00T 발표, AI 아트 설치 작품 오프닝

지정학: 반도체 전쟁

TSMC 의존성 — 가장 큰 단일 리스크

• Nvidia의 칩은 전량 TSMC 생산 → [[entities/morris-chang]]
• 물류 책임자 Deb Shoquist: "대만에 전쟁이 나면 모든 제품이 한 단계씩 다운그레이드될 것"
• 황젠슨의 지시: "이 시나리오에 뇌세포 하나도 쓰지 마라 — 대비가 불가능한 사건이다"
• 황젠슨 자신은 이 리스크를 완전히 차단하고 실행 가능한 영역에만 집중

미중 반도체 전쟁

• 미국이 A100/H100 중국 수출 금지 (2022)
• 황젠슨: 제한된 버전 칩으로 우회 시도 → 미국 정부가 루프홀 봉쇄
• "그들이 우리한테서 못 사면, 스스로 만들 것이다"
• 금지 전날 ByteDance에 ChatGPT 10개 분량 학습 가능한 A100 물량 판매

TSMC 피닉스 팹

• 1,100에이커 부지, 2개 팹, 총 $400억 이상 투자
• 모리스 창: "이 투자는 바보 같은 짓" (미국 노동 생산성 불신) → [[entities/morris-chang]]
• 실리콘 쉴드 이론: TSMC의 대만 집중이 오히려 중국의 침공을 억지

Jensen Huang — 인물 분석

리더십 스타일

• "황의 분노(Wrath of Huang)": 전략적 도구로서의 분노 — 관리자들은 그보다 인류 멸종을 덜 무서워한다고 저자 관찰
• "Struggle Sessions": 직원들과의 집중 질의 세션, 약점 공개 노출
• 직속 보고자 50명 이상 — "나를 제외한 나머지는 내 대역폭을 줄여주는 역할"
• 오전 3:30에 기상하여 가장 중요한 장기 프로젝트부터 시작

사고 방식

• 단일한 확정 견해가 아닌 "양면에서 공격" — 모순된 발언이 잦음
• 아이디어가 "암석 진동기" 과정을 거쳐 다듬어지면 반복하기 시작 → 그때부터 진심
• 핵심 개념 사례: "zero-billion-dollar market" (아무도 보지 않는 시장을 먼저 선점하라)
• 과학소설에 강한 거부감: "우리는 심각한 사람들이 심각한 일을 하는 회사다"

p(doom) = 0 (사실상 음수)

• Bengio, Hinton, Sutskever의 AI 위험 경고를 정면 거부
• "AI가 일자리를 없앨까? 계산기가 수학을 없앴나? 이 대화는 너무 지겨워!"
• Hinton이 황젠슨의 설득에 p(doom)을 50% → 10~20%로 낮춤

성공의 원인 (4가지 해석)

1. Dally: 압도적 노동 윤리 — "나머지는 Jensen의 대역폭을 줄이는 역할"
2. Horstmann: 적응성 — "자기 자신을 엔지니어링했다, 입력-출력 추상화로"
3. Aarts: 운 — "두 개의 비주류 기술(병렬컴퓨팅+신경망)이 이렇게 완벽하게 맞아떨어질 수 없다"
4. Morris Chang: "지성 자체가 탁월하다" (90세 노인의 70년 관찰 결론)

AI 위험 논쟁: The Fear

Yoshua Bengio의 전환

• 2023년 초 겨울 산책 중 "전환(conversion)" 경험 — "내 아이들과 손자는 20년 후 삶이 있을까"
• ChatGPT를 "외계인을 만나는 것"에 비유
• p(doom) = 50% → "이것은 최악의 공포 — 감정을 걷어내고 합리적으로 분석할수록 더 무서워진다"

Geoffrey Hinton의 변화

• Google 퇴사, AI 위험 경고 전업
• Bengio와 동시에 독립적으로 같은 결론에 도달
• Ilya Sutskever도 "정렬(alignment) 문제"에 집중하기 시작 → GPT-4o 출시 다음날 OpenAI 사직

Yann LeCun의 반박

• p(doom) = 0 — "AI는 우리가 목표를 설정해준다, 지배 욕구를 만들 이유가 없다"
• Bengio와 공개 논쟁 (같은 논문 공저자였음에도)

SB 1047 (캘리포니아 AI 규제법)

• Bengio·Hinton 지지 → 여론 80% 찬성 → Gavin Newsom 거부권
• 실리콘밸리 VC 연합의 로비에 패배

책의 결론: 씽킹 머신

저자 Stephen Witt가 Eos(10,000칩 슈퍼컴퓨터, GPT-3 학습 시간 4분 미만)에 들어서는 장면으로 마무리:

"나는 지금 컴퓨터의 뇌 안에 서 있었다. 초당 10경(10 quintillion) 번의 연산이 내 주변에서 실행되고 있었다. 이것이 우리 모두를 죽이거나 구할 것이다 — 어느 쪽이든, 이것은 Jensen의 칩 위에서 일어날 것이다."

황젠슨이 Eos가 처리 중인 작업을 "아직은 GPT-4 스타일 내부 모델 훈련"이라고 설명하자, 저자는 그 기계가 자신을 따라잡고 있음을 직감.

핵심 인물 정리

역사 타임라인

관련 페이지

• [[entities/jensen-huang]] — 황젠슨 인물 페이지
• [[entities/nvidia]] — Nvidia 기업 페이지
• [[entities/morris-chang]] — TSMC 창업자
• [[books/chip-by-chip]] — TSMC → Nvidia 의존성 체인 분석
• [[papers/attention-is-all-you-need]] — Transformer 아키텍처 원논문
• [[books/singularity-nearer]] — 커즈와일의 AI 가속 예측
• [[books/the-infinity-machine]] — DeepMind/해시비스, AlphaGo, Hinton 연결
• [[books/scaling-era]] — Ilya Sutskever 등 AI 프런티어 구술사