구글, 텍스트 생성에 확산을 적용: DiffusionGemma 공개

|

하드웨어 뉴스

4 구글, 텍스트 생성에 확산을 적용: DiffusionGemma 공개 본문보기 QM포시포시 QM포시포시 | 1.7K | 8 2026.06.11 10:13

출처 1 : https://blog.google/innovation-and-ai/technology/developers-tools/diffusion-gemma-faster-text-generation

<div align="center"><table align="center" class="__se_tbl" style="border-width: 1px 1px 0px 0px; border-style: dashed dashed none none; border-color: rgb(199, 199, 199) rgb(199, 199, 199) currentColor currentColor;width:800px;max-width: 100%" border="1" cellspacing="0" cellpadding="0" attr_no_border_tbl="1"><tbody><tr><td width="800" style="border-width: 0px 0px 1px 1px; border-style: none none dashed dashed; border-color: currentColor currentColor rgb(199, 199, 199) rgb(199, 199, 199);"><img src="https://img2.quasarzone.com/editor/2026/06/11/b0aca913f014be2d01ec480ef7795a3f.png" alt="퀘이사존"> 오늘, 텍스트 확산(text diffusion)이라는 매우 빠른 텍스트 생성 방식을 탐구하는 실험적인 오픈 소스 모델인 DiffusionGemma를 소개합니다. Apache 2.0 라이선스로 배포되는 이 26B 규모의 MoE은 일반적인 자기회귀 방식의 LLM에서 토큰 단위로 순차적으로 처리하는 방식을 뛰어넘어, 텍스트 블록 전체를 동시에 생성하여 GPU에서 최대 4배 빠른 텍스트 생성 속도를 제공합니다. 업계 최고 수준의 파라미터별 인텔리전스를 자랑하는 Gemma 4 제품군과 최첨단 Gemini Diffusion 연구를 기반으로 구축된 DiffusionGemma는 생성 속도를 극대화하도록 설계된 새로운 확산 헤드를 통합했습니다. 자기회귀 방식의 Gemma 4 모델은 여전히 고품질의 결과물을 위한 표준이지만, DiffusionGemma는 인라인 편집, 빠른 반복 작업, 비선형 텍스트 구조 생성과 같이 속도가 중요한 대화형 로컬 워크플로를 연구하는 연구원과 개발자를 위해 설계되었습니다. <img src="https://img2.quasarzone.com/editor/2026/06/11/d49ea3548cf940f1fffe3062159c575d.webp" alt="퀘이사존"> 실시간 대화형 AI 애플리케이션을 개발하는 개발자는 종종 로컬 추론의 지연 시간 병목 현상으로 어려움을 겪습니다. DiffusionGemma는 이러한 문제를 직접적으로 해결하지만, 몇 가지 주요 장단점이 있습니다. <ul><li style="text-align: justify; line-height: 2; min-height: 30px;">매우 빠른 추론: 디코딩 병목 현상을 메모리 대역폭에서 컴퓨팅 성능으로 전환함으로써, DiffusionGemma는 전용 GPU에서 최대 4배 빠른 토큰 출력을 생성합니다. (단일 NVIDIA H100에서 초당 1,000개 이상의 토큰, NVIDIA RTX 5090에서 초당 700개 이상의 토큰) </li><li style="text-align: justify; line-height: 2; min-height: 30px;">접근 가능한 하드웨어 용량: 추론 시 3.8B 파라미터만 활성화하는 총 26B의 MoE 모델로 작동하는 DiffusionGemma는 양자화 시 고급 전용 소비자 GPU의 18GB VRAM 용량 내에서 충분히 작동합니다. </li><li style="text-align: justify; line-height: 2; min-height: 30px;">양방향 어텐션: 각 순방향 패스에서 256개의 토큰을 병렬로 생성하여 모든 토큰이 다른 모든 토큰에 어텐션할 수 있도록 합니다. 이는 인라인 편집, 코드 삽입, 아미노산 서열 또는 수학 그래프와 같은 비선형 영역에서 상당한 이점을 제공합니다. </li><li style="text-align: justify; line-height: 2; min-height: 30px;">지능형 자체 수정: 모델은 자체 출력을 반복적으로 개선하여 전체 텍스트 블록을 한 번에 평가하고 오류를 실시간으로 수정할 수 있습니다. </li><li style="text-align: justify; line-height: 2; min-height: 30px;">실험적 상태 및 프로덕션 권장 사항: DiffusionGemma는 속도와 병렬 레이아웃 생성을 우선시하기 때문에 전반적인 출력 품질이 표준 Gemma 4보다 낮습니다. 최고 품질이 요구되는 애플리케이션의 경우 표준 Gemma 4를 사용하는 것이 좋습니다.</li></ul> 미세 조정을 통해 특정 작업에서 DiffusionGemma의 성능을 향상시킬 수 있습니다. 아래 예에서 Unsloth는 DiffusionGemma를 미세 조정하여 스도쿠를 플레이하도록 했습니다. 스도쿠는 각 토큰이 다음 토큰에 의존하기 때문에 자기회귀 모델이 어려움을 겪는 작업입니다. DiffusionGemma의 양방향 어텐션 덕분에 이 작업이 훨씬 쉬워집니다. <img src="https://img2.quasarzone.com/editor/2026/06/11/3bff79c01d199847b1b656973f07fe71.webp" alt="퀘이사존"> 텍스트에 확산 알고리즘을 사용하는 이유는 무엇일까요? AI 연구 커뮤니티는 수년간 확산 기반 텍스트 생성 기술을 연구해 왔지만, 이를 대규모 모델에 적용하는 것은 여전히 어려운 과제였습니다. DiffusionGemma는 모델의 하드웨어 활용 방식을 혁신적으로 변화시켜 이 문제를 해결합니다. 기존 모델의 한계점대부분의 언어 모델은 마치 타자기처럼 왼쪽에서 오른쪽으로 한 번에 하나의 토큰씩 생성합니다. 클라우드 환경에서는 서버가 수천 개의 사용자 요청을 일괄 처리하여 하드웨어 부하를 분산할 수 있기 때문에 효율적입니다. 하지만 로컬 환경에서 단일 사용자를 위해 실행할 경우, 이러한 단어 단위 처리 방식은 전용 GPU나 TPU의 활용도를 떨어뜨립니다. 대부분의 시간을 다음 "키 입력"을 기다리는 데 소비하기 때문입니다. DiffusionGemma는 이러한 비효율성을 역전시킵니다. 단어를 순차적으로 예측하는 대신, 256개의 토큰으로 구성된 전체 단락을 동시에 생성합니다. 컴퓨터 프로세서에 더 많은 작업을 한 번에 처리하도록 함으로써, DiffusionGemma는 하드웨어의 잠재력을 최대한 활용합니다. 마치 단일 단어를 순차적으로 입력하는 타자기에서 전체 텍스트 블록을 동시에 찍어내는 거대한 인쇄기로 모델 추론 방식을 업그레이드하는 것과 같습니다. 즉, DiffusionGemma의 속도 향상은 로컬 및 저속 동시 추론에 최적화되어 있습니다. 높은 QPS를 처리하는 클라우드 환경에서는 자기회귀 모델을 효율적으로 배포하여 컴퓨팅 자원을 최대한 활용할 수 있으므로, DiffusionGemma의 병렬 디코딩은 효율성이 떨어지고 오히려 서비스 비용이 증가할 수 있습니다. 처리량 이점은 단일 가속기에서 낮은 배치 크기에서 중간 배치 크기일 때 가장 두드러집니다. 텍스트 확산 작동 방식시각적 정적인 이미지에서 시작하여 반복적으로 다듬어 선명한 이미지를 생성하는 AI 이미지 생성기와 유사하게, DiffusionGemma는 텍스트에 이 과정을 적용합니다. <ul><li style="text-align: justify; line-height: 2; min-height: 30px;">캔버스: 모델은 무작위로 생성된 자리 표시자 토큰으로 구성된 캔버스에서 시작합니다.</li><li style="text-align: justify; line-height: 2; min-height: 30px;">반복적인 다듬기: 모델은 여러 번의 패스를 거쳐 올바른 토큰을 확정하고 이를 문맥 단서로 사용하여 나머지 부분을 다듬습니다.</li><li style="text-align: justify; line-height: 2; min-height: 30px;">최종 다듬기: 텍스트가 고품질 출력으로 수렴됩니다.</li></ul> 이 모델은 생성과 동시에 전체 단락을 처리할 수 있기 때문에 복잡한 마크다운 서식을 완벽하게 닫거나 거의 실시간으로 코드를 생성하고 렌더링하는 등 새로운 모델 동작 패턴을 구현할 수 있습니다. <img src="https://img2.quasarzone.com/editor/2026/06/11/c399f421e70dbbdf544e08df2b62103c.png" alt="퀘이사존"> </td></tr></tbody></table></div>

작성자 프로필

QM포시포시

QM 포인트 : 277,927 exp

작성물 댓글

회원 자기소개 펼치기

댓글: 8개

전체 게시판

전체 뉴스/정보 질문/토론 커뮤/유머

2	AOC, HDR1000 밝기를 갖춘 저렴한 2K 360Hz QD-Mini LED 모니터 출시 5 하드웨어 뉴스 - 저장장치 QM깜냥 \| 617 \| 06.16
9	2026년 2분기 HDD 공급 부족 심화, 시장 도매가 전분기 대비 10% 상승 15 하드웨어 뉴스 - 저장장치 QM깜냥 \| 822 \| 06.16
0	화요일 오전인데 벌써부터 기운 빠지는 느낌임. 자유게시판 - 잡담 아침시리얼 \| 118 \| 06.16
0	sapphire nitro rx9070xt 글카 v램 튜닝 맞을까요? 2 오버클록/언더볼팅 - 질문 디디에록바형 \| 181 \| 06.16
3	One UI 9, 갤럭시 S23의 마지막 업데이트가 될 수도 9 모바일 뉴스 - 안드로이드 QM에디 \| 3.9K \| 06.16
0	윈도우PC 한대 있으면 생태계라고 할만한걸 맞추기 좀 애매해지긴 하네요 2 자유게시판 - 질문 피그미 \| 235 \| 06.16
1	벌써 점심시간 다 돼가네요. 오늘 점심 뭐 드실 예정인가요? 2 자유게시판 - 질문 asdfer \| 144 \| 06.16
0	예전에 z590인가 아펙스15만했던거 처럼 떨어질까요 11 CPU/메인보드/램 - 잡담 테스트No.1 \| 249 \| 06.16
1	컴퓨터 견적 맞췄는데 피드백 해주실수 있나요? 6 PC조립/견적 - 질문 이핸핸핸 \| 79 \| 06.16
0	아이온2 용 견적 부탁드려요 5 PC조립/견적 - 질문 표성 \| 281 \| 06.16
2	요즘 날씨가 애매해서 옷 입기가 제일 어려운 듯. 3 자유게시판 - 잡담 jekki1023 \| 170 \| 06.16
0	antec flux pro 사용하시는 분들 질문이 하나 있습니다. 2 케이스 - 질문 베텔기우스 \| 301 \| 06.16
3	카카오, 카카오톡 채팅방에서 사용하는 ‘ChatGPT 챗봇’ 기능 출시 3 모바일 뉴스 - 업계동향 빌보 \| 779 \| 06.16
1	일하기가 좀 많이 팍팍해진거같습니다 4 자유게시판 - 고민/상담 user_1139345 \| 232 \| 06.16
0	프로푸스 데네브 이후로 amd인데 8 CPU/메인보드/램 - 잡담 테스트No.1 \| 246 \| 06.16
1	PC 호환성 문의 부탁드립니다. 5 PC조립/견적 - 질문 미나리선생님 \| 65 \| 06.16
3	진짜 엘프 느낌 나는 헤메코 강자 8 유머게시판 user_924505 \| 2.5K \| 06.16
2	XBOX, 사우스 오브 미드나잇 개발사 컴펄션 게임즈 폐쇄 가능성 2 게임 뉴스 - 업계동향 빌보 \| 281 \| 06.16
0	일할때 제일행복한순간 4 자유게시판 - 잡담 뚱땅땅 \| 165 \| 06.16
72	5090 최상급기 사면 본인이 뭐라도 되는 줄 아는 인간이 50 그래픽카드 - 잡담 베지트 \| 7.2K \| 06.16

출석체크

질문하기

최신 파트너 핫딜

1 / 5

1,138,320원

2	AOC, HDR1000 밝기를 갖춘 저렴한 2K 360Hz QD-Mini LED 모니터 출시 5 하드웨어 뉴스 - 저장장치 QM깜냥 \| 617 \| 06.16
9	2026년 2분기 HDD 공급 부족 심화, 시장 도매가 전분기 대비 10% 상승 15 하드웨어 뉴스 - 저장장치 QM깜냥 \| 822 \| 06.16
0	화요일 오전인데 벌써부터 기운 빠지는 느낌임. 자유게시판 - 잡담 아침시리얼 \| 118 \| 06.16
0	sapphire nitro rx9070xt 글카 v램 튜닝 맞을까요? 2 오버클록/언더볼팅 - 질문 디디에록바형 \| 181 \| 06.16
3	One UI 9, 갤럭시 S23의 마지막 업데이트가 될 수도 9 모바일 뉴스 - 안드로이드 QM에디 \| 3.9K \| 06.16
0	윈도우PC 한대 있으면 생태계라고 할만한걸 맞추기 좀 애매해지긴 하네요 2 자유게시판 - 질문 피그미 \| 235 \| 06.16
1	벌써 점심시간 다 돼가네요. 오늘 점심 뭐 드실 예정인가요? 2 자유게시판 - 질문 asdfer \| 144 \| 06.16
0	예전에 z590인가 아펙스15만했던거 처럼 떨어질까요 11 CPU/메인보드/램 - 잡담 테스트No.1 \| 249 \| 06.16
1	컴퓨터 견적 맞췄는데 피드백 해주실수 있나요? 6 PC조립/견적 - 질문 이핸핸핸 \| 79 \| 06.16
0	아이온2 용 견적 부탁드려요 5 PC조립/견적 - 질문 표성 \| 281 \| 06.16
2	요즘 날씨가 애매해서 옷 입기가 제일 어려운 듯. 3 자유게시판 - 잡담 jekki1023 \| 170 \| 06.16
0	antec flux pro 사용하시는 분들 질문이 하나 있습니다. 2 케이스 - 질문 베텔기우스 \| 301 \| 06.16
3	카카오, 카카오톡 채팅방에서 사용하는 ‘ChatGPT 챗봇’ 기능 출시 3 모바일 뉴스 - 업계동향 빌보 \| 779 \| 06.16
1	일하기가 좀 많이 팍팍해진거같습니다 4 자유게시판 - 고민/상담 user_1139345 \| 232 \| 06.16
0	프로푸스 데네브 이후로 amd인데 8 CPU/메인보드/램 - 잡담 테스트No.1 \| 246 \| 06.16
1	PC 호환성 문의 부탁드립니다. 5 PC조립/견적 - 질문 미나리선생님 \| 65 \| 06.16
3	진짜 엘프 느낌 나는 헤메코 강자 8 유머게시판 user_924505 \| 2.5K \| 06.16
2	XBOX, 사우스 오브 미드나잇 개발사 컴펄션 게임즈 폐쇄 가능성 2 게임 뉴스 - 업계동향 빌보 \| 281 \| 06.16
0	일할때 제일행복한순간 4 자유게시판 - 잡담 뚱땅땅 \| 165 \| 06.16
72	5090 최상급기 사면 본인이 뭐라도 되는 줄 아는 인간이 50 그래픽카드 - 잡담 베지트 \| 7.2K \| 06.16

전체 게시판

|

하드웨어 뉴스

구글, 텍스트 생성에 확산을 적용: DiffusionGemma 공개

작성자 프로필

전체 게시판

AOC, HDR1000 밝기를 갖춘 저렴한 2K 360Hz QD-Mini LED 모니터 출시

2026년 2분기 HDD 공급 부족 심화, 시장 도매가 전분기 대비 10% 상승

화요일 오전인데 벌써부터 기운 빠지는 느낌임.

sapphire nitro rx9070xt 글카 v램 튜닝 맞을까요?

One UI 9, 갤럭시 S23의 마지막 업데이트가 될 수도

윈도우PC 한대 있으면 생태계라고 할만한걸 맞추기 좀 애매해지긴 하네요

벌써 점심시간 다 돼가네요. 오늘 점심 뭐 드실 예정인가요?

예전에 z590인가 아펙스15만했던거 처럼 떨어질까요

컴퓨터 견적 맞췄는데 피드백 해주실수 있나요?

아이온2 용 견적 부탁드려요

요즘 날씨가 애매해서 옷 입기가 제일 어려운 듯.

antec flux pro 사용하시는 분들 질문이 하나 있습니다.

카카오, 카카오톡 채팅방에서 사용하는 ‘ChatGPT 챗봇’ 기능 출시

일하기가 좀 많이 팍팍해진거같습니다

프로푸스 데네브 이후로 amd인데

PC 호환성 문의 부탁드립니다.

진짜 엘프 느낌 나는 헤메코 강자

XBOX, 사우스 오브 미드나잇 개발사 컴펄션 게임즈 폐쇄 가능성

일할때 제일행복한순간

5090 최상급기 사면 본인이 뭐라도 되는 줄 아는 인간이

[하이마트] ASUS x NVIDIA RTX iPC 기획... 1

[옥션] 쿡테크 25 100W 일체형 보조배터리 1

[지마켓] 블루마운틴 여름 슬립온 우븐슈즈 1

[11번가] 20% 디지털 온누리상품권! 삼성 65인치 ... 1

[쿠팡] 패브릭소재 제닉스 리브체어 라벤더색상 47% 할... 1

[옥션] 무궁화 샤워때비누 900ml 2개 2

[옥션] 기능성 머슬핏 운동나시 2

[네이버] 리뷰 1만개 돌파!! 에이픽스 GC001 13... 1

[지마켓] 자연해답 블루베리 퓨레 20g 14포 1

[기타] 🍀S26류 대란🍀번호이동·기변 특가🔥 온누리상품... 0

[기타] 통신3사 갤럭시 S26 시리즈 역대급 특가🚨 S... 1

[네이버] 멀티탭정리 아이템 아레나 멀티트레이 프로(Pr... 1

[기타] 🎁 온누리상품권 26.3만 지급🎁 +🚨통신3사... 2

[기타] tapo RV50 Pro Omni 물걸레 로봇청소기 0

[옥션] 르까프 인기상품 모음전 1

[네이버] 카멜마운트 인기 모니터암 퀘이라존 라이브 특가... 0

[네이버] 아이 있는 집 필수템! 라베스토 TV보호기 1... 1

[지마켓] WFB 남성 냉감 작업복 바지 3장 1

[기타] 농협출고 신비복숭아 2kg 중소과 2

[옥션] 1+1 스포츠 러닝모자 남녀공용 (10,710원... 2

DP 2.1 & AI 업스케일링 탑재! 작지만 강한 OL... 9

GAMER STORM, 이번엔 메인스트림 시장이다! 95

게임도 업무도 하나로 끝내고 싶을 때 98

디아블로 스토리 읽기 4부: 증오에서 태어난 딸, 성역으... 35

화이트 시스템에 FIT 하게! 18

디지털 기기 2대 이상 갖고 있다면 주목! 123

M-ATX 폼팩터를 실속 있게 꽉 채웠다 57

5만 원짜리로 게임할 수 있을까? 18

MSI는 중급기도 성능이 므시므시해 215

OLED 게이밍 모니터, 이제 ROG도 가격 사정권? 14

TWS 하나를 사더라도 평범하지 않고 싶다면 323

성능에 조준경을 올린 겜트북 139

신고하기