쌍둥이 자리 확산을 소개합니다

최첨단 실험 텍스트 확산 모델

output: Gemini Diffusion is an experimental text diffusion model from Google AI, combining the strengths of large-language models with a new generation technique called diffusion.

출력 : Gemini 확산은 Google AI의 실험적인 텍스트 확산 모델로, 대규모 모델의 강점을 확산이라는 새로운 세대 기술과 결합합니다.

Traditional language models generate text one token at a time using autoregressive methods. However, in tasks like editing, inserting content in the context of math or code, and merging different ideas, a more flexible and powerful generation paradigm is needed.

전통적인 언어 모델은 자동 회귀 방법을 사용하여 한 번에 하나의 토큰을 생성합니다. 그러나 편집, 수학 또는 코드의 맥락에서 컨텐츠를 삽입하고 다른 아이디어를 병합하는 것과 같은 작업에서보다 유연하고 강력한 세대 패러다임이 필요합니다.

Diffusion models offer an alternative approach. Instead of learning to predict text directly, they excel at refining noise to generate outputs step-by-step. This property is leveraged in Gemini Diffusion for efficient generation.

확산 모델은 대체 접근법을 제공합니다. 텍스트를 직접 예측하는 법을 배우는 대신 소음을 정제하여 탁월하여 출력을 단계별로 생성합니다. 이 속성은 효율적인 생성을 위해 Gemini 확산으로 활용됩니다.

Capabilities

기능

Rapid response

빠른 응답

Generates content significantly faster than even our fastest model so far.

지금까지 가장 빠른 모델보다 콘텐츠를 훨씬 빠르게 생성합니다.

More coherent text

더 일관된 텍스트

Generates entire blocks of tokens at once, meaning it responds more coherently to a user’s prompt than autoregressive models.

한 번에 전체 토큰 블록을 생성하므로자가 회귀 모델보다 사용자의 프롬프트에 더 일관되게 응답합니다.

Iterative refinement

반복적 인 개선

Corrects errors during generation for more consistent outputs.

보다 일관된 출력에 대해 생성 중 오류를 수정합니다.

Benchmarks

벤치 마크

Gemini Diffusion’s external benchmark performance is comparable to much larger models, whilst also being faster.

Gemini Diffusion의 외부 벤치 마크 성능은 훨씬 더 큰 모델과 비슷하지만 더 빠릅니다.

Methodology

방법론

All scores are pass @1 (no majority voting). The Gemini 2.0 Flash-Lite experiments are run with the AI Studio API for the model-id gemini-2.0-flash-lite with the default sampling settings.

모든 점수는 Pass @1 (다수의 투표 없음)입니다. Gemini 2.0 Flash-Lite 실험은 기본 샘플링 설정과 함께 Model-ID Gemini-2.0-Flash-Lite의 AI Studio API와 함께 실행됩니다.

* Non-agentic evaluation (single turn edit only), max prompt length of 32K.

* 비기능 평가 (단일 회전 편집 만), 최대 프롬프트 길이 32k.

Gemini Diffusion speed

쌍둥이 자리 확산 속도

Average sampling speed across reported evals.

보고 된 EVAL의 평균 샘플링 속도.

Try Gemini Diffusion

Gemini 확산을 시도하십시오

Gemini Diffusion is currently available as an experimental demo to help develop and refine future models. If you're interested in getting access to the demo, please sign up to the waitlist.

Gemini 확산은 현재 미래 모델을 개발하고 개선하는 데 도움이되는 실험 데모로 제공됩니다. 데모에 액세스하는 데 관심이 있으시면 대기자 명단에 가입하십시오.