AI와 개발을 쉽게 이해하는 실험실

비개발자도 따라오는 AI 도구, 자동화, 개발 실험 기록

AI & LLM/ChatGPT & OpenAI

OpenAI 자체 칩 공개 정리 — Broadcom과 만든 첫 AI 칩 정체

루민 Lumin 2026. 6. 27. 16:13
반응형

ChatGPT를 매일 쓰는 분이라면 "이거 왜 가끔 느려지지?" 하는 경험이 한 번쯤 있을 겁니다. 그 답의 절반쯤은 "AI 칩이 부족해서"입니다.

그래서 OpenAI가 결국 자기네 칩을 직접 만들기로 했습니다. 이번에 Broadcom(브로드컴, 미국의 대형 반도체 설계 회사)과 손잡고 공개한 자체 AI 칩이 그 결과물입니다.

이 글은 반도체나 AI 인프라를 잘 모르는 분도 무리 없이 따라올 수 있게, "왜 만들었나 / 뭐가 다른가 / 나한테 무슨 의미인가" 세 가지에 집중합니다. 전문 용어가 나올 때마다 옆에 풀이를 붙였으니 편하게 읽으셔도 됩니다.

OpenAI 자체 칩 한눈에 보기

OpenAI 자체 칩은 ChatGPT 같은 자사 AI 서비스를 더 빠르고 저렴하게 돌리기 위해 OpenAI가 직접 설계하고 Broadcom이 함께 만든 전용 반도체입니다.

쉽게 말해 지금까지는 남(엔비디아)이 만든 만능 칩을 비싸게 사다 썼다면, 이제는 "우리 서비스 전용 맞춤 칩"을 직접 그리기 시작했다는 뜻입니다.

항목 핵심 내용
누가 OpenAI(설계 주도) + Broadcom(제조·공동개발)
무엇을 AI 추론(서비스 응답)에 특화된 전용 칩
엔비디아 의존도·비용·공급 부족 해소
언제 2026년경 자체 데이터센터 투입 목표 (공식 발표 기준)
사용자 영향 응답 속도·서비스 안정성 개선 가능성

날짜와 수치는 글 작성 시점의 공식 발표·주요 매체 보도를 기준으로 했고, 양산 일정은 반도체 업계 특성상 늦춰질 수 있다는 점은 감안하셔야 합니다.

왜 OpenAI는 굳이 자기 칩을 만들까

핵심은 세 가지입니다. 돈, 공급, 그리고 최적화.

지금 ChatGPT 같은 AI 서비스를 돌리려면 GPU(원래는 게임 그래픽용으로 만들어진 연산 칩, 지금은 AI 학습·실행에 가장 많이 쓰임)가 어마어마하게 필요합니다. 그 GPU 시장의 약 80% 이상을 엔비디아 한 회사가 쥐고 있죠.

문제는 이게 너무 비싸고, 사고 싶어도 줄을 서야 한다는 점입니다. 고성능 AI GPU 한 장이 수천만 원대인데, OpenAI 같은 회사는 그걸 수십만 장 단위로 굴립니다.

💡 비유하자면, 식당이 잘 되는데 매일 외부에서 비싼 도시락을 사다 손님에게 내는 셈입니다. 어느 순간엔 "차라리 우리 주방을 만들자"가 됩니다.

여기에 한 가지가 더 있습니다. 최적화입니다. 엔비디아 GPU는 게임·연구·AI 학습·추론 다 잘하는 만능 선수입니다.

반면 OpenAI가 만드는 칩은 "ChatGPT 응답 빠르게 뱉기" 한 가지에만 집중해서 설계할 수 있습니다. 전용으로 만들면 같은 전력으로 더 많은 일을 처리합니다.

Broadcom과 손잡은 이유

이 부분이 의외로 헷갈리는 분이 많아서 짚고 갑니다. OpenAI는 칩을 직접 공장에서 찍어내는 게 아닙니다.

반도체 산업은 크게 세 단계로 나뉩니다.

[설계] → [공동 개발/검증] → [제조(파운드리)]
 OpenAI    Broadcom            TSMC 등

OpenAI는 "이런 칩이 필요하다"는 설계 방향을 잡고, Broadcom은 그걸 실제로 동작하는 반도체 회로로 풀어내는 일을 맡습니다. 실제로 웨이퍼(실리콘 원판)에 새기는 양산은 대만 TSMC 같은 파운드리 업체가 담당합니다.

Broadcom이 선택된 이유는 단순합니다. 구글 TPU(구글이 자체 개발한 AI 칩)도 Broadcom이 함께 만들었습니다. "빅테크의 자체 AI 칩 공동개발 경력"이 가장 풍부한 회사라는 얘기입니다.

빅테크 자체 AI 칩 협력사
구글 TPU Broadcom
아마존 Trainium/Inferentia Annapurna(자회사)
마이크로소프트 Maia 자체+협력
OpenAI (이번 신규 칩) Broadcom

표를 보면 알 수 있듯 OpenAI만 늦은 게 아니라, 빅테크 전체가 가는 길입니다.

엔비디아 GPU와 뭐가 다른가

가장 큰 차이는 "범용"이냐 "전용"이냐입니다.

엔비디아 GPU는 AI 학습(모델을 처음부터 가르치는 일)과 추론(이미 배운 모델이 답을 내놓는 일) 둘 다 잘합니다. 반면 이번 OpenAI 칩은 추론에 무게를 둔다고 알려져 있습니다.

왜 추론이냐? 우리가 ChatGPT에 질문을 던질 때마다 일어나는 일이 바로 추론입니다. 학습은 가끔, 추론은 매일·매초 일어납니다. 그래서 비용도 추론 쪽이 훨씬 많이 나갑니다.

구분 범용 GPU (엔비디아) 전용 추론 칩 (OpenAI 신규)
잘하는 일 학습·추론·연구 전반 자사 모델 추론에 집중
가격 매우 비쌈 (자사용이라 외부 판매가 없음)
유연성 어떤 AI든 잘 돎 OpenAI 모델에 최적
비유 만능 셰프 ChatGPT 전담 요리사

한 가지 솔직하게 짚으면, 이번 칩이 엔비디아를 "대체"한다기보다는 보완한다고 보는 게 맞습니다. OpenAI도 엔비디아 GPU를 계속 대량 구매한다는 계획을 함께 발표했거든요. "한쪽에만 매달리지 않겠다"는 분산 전략에 가깝습니다.

일반 사용자에게 무슨 의미가 있을까

직접적으로 손에 잡히는 변화는 두 가지로 정리할 수 있습니다.

첫째, 응답 속도와 안정성. 자체 칩이 본격 가동되면 트래픽이 몰릴 때(예: 미국 시간대 오전, 신규 모델 출시 직후) 자주 발생하던 지연이나 "용량 초과" 메시지가 줄어들 가능성이 있습니다.

저도 ChatGPT를 거의 매일 쓰는데, GPT-5 같은 신모델이 나온 직후 며칠은 체감상 응답이 답답할 때가 있었습니다. 이런 병목이 인프라 확충과 자체 칩으로 점점 완화되는 그림입니다.

둘째, 가격 정책의 여유. 운영 비용이 줄어들면 무료·저가 플랜의 사용량 한도를 늘리거나, API(외부 개발자가 ChatGPT 기능을 자기 서비스에 연결할 때 쓰는 통로) 가격을 내릴 여지가 생깁니다.

다만 이건 어디까지나 "여지"입니다. OpenAI가 절감한 비용을 곧장 가격 인하로 돌릴지, 아니면 더 큰 모델 학습에 재투자할지는 회사 결정이고, 솔직히 후자일 확률도 작지 않습니다.

💡 "곧 ChatGPT가 싸진다"고 단정하기는 이르고, "지금보다 더 비싸지지 않을 명분"이 생긴 정도로 보는 게 안전합니다.

자주 헷갈리는 부분 정리

이 주제로 글을 쓰면서, 비개발자 친구들에게 설명할 때 자주 받았던 질문 몇 개를 모았습니다.

"이제 OpenAI 칩을 살 수 있나요?" 아니요. 자사 데이터센터 내부용입니다. 엔비디아처럼 일반 회사가 사다 쓰는 형태가 아닙니다.

"이러면 엔비디아는 망하나요?" 그럴 가능성은 매우 낮습니다. OpenAI 외에도 전 세계 수많은 기업·연구소가 엔비디아 GPU를 쓰고, OpenAI 본인도 엔비디아 구매를 계속한다고 했습니다.

"한국 사용자도 혜택을 보나요?" 자체 칩이 들어가는 데이터센터는 주로 미국에 있지만, ChatGPT는 글로벌 서비스라 전체 응답 속도·안정성이 좋아지면 한국 사용자도 같이 혜택을 봅니다.

"언제부터 체감되나요?" 공식적으로 2026년경부터 자사 인프라에 단계 투입이라는 발표가 있었습니다. 다만 반도체 일정은 미뤄지는 게 흔하니, 실제 사용자 체감은 그 이후로 보는 게 안전합니다.

솔직하게 본 한계와 변수

장밋빛 그림만 그리면 양산 기사처럼 보이니까 아쉬운 점도 짚고 갑니다.

첫째, 첫 세대 칩은 보통 기대만큼 안 나옵니다. 구글 TPU도 1세대는 평이 좋지 않았고, 3세대쯤 가서야 본격적인 경쟁력이 생겼습니다. OpenAI 첫 칩도 출시 직후부터 엔비디아를 압도하기는 어려울 가능성이 큽니다.

둘째, 양산 일정 리스크. TSMC의 최신 공정은 이미 애플·엔비디아·AMD 같은 거대 고객으로 꽉 차 있습니다. OpenAI가 원하는 시점에 원하는 물량을 확보할 수 있는지는 또 다른 문제입니다.

셋째, 소프트웨어 생태계. 엔비디아가 강한 진짜 이유는 칩 자체보다 CUDA라는 개발 환경(엔비디아 GPU를 잘 다루기 위한 도구 모음) 때문입니다. OpenAI는 자체 모델만 돌리면 되니 이 문제가 작지만, "엔비디아만큼 범용적으로 좋다"고 말하기는 어렵습니다.

마무리

OpenAI 자체 칩은 "엔비디아 킬러"라기보다는 자기 서비스 비용 구조를 직접 컨트롤하기 위한 인프라 자립 선언에 가깝습니다. 구글·아마존·마이크로소프트가 이미 걸어간 길을, OpenAI가 Broadcom의 손을 빌려 따라가는 그림이죠.

비개발자 입장에서 지금 당장 할 일은 없습니다. 다만 앞으로 ChatGPT가 느려지거나 가격 정책이 바뀔 때, 그 배경에 "AI 칩 인프라"가 있다는 맥락을 알고 있으면 뉴스가 훨씬 잘 읽힙니다.

관심이 더 생기셨다면 다음 단계로 구글 TPU, 아마존 Trainium을 같이 검색해 보시길 권합니다. 빅테크들이 왜 약속이라도 한 듯 자체 칩으로 향하는지, 큰 그림이 한 번에 보이실 겁니다.

함께 보면 좋은 글

반응형