도형준 지식 볼트

태그: Open-Source

8건의 항목

  • 2026년 7월 21일

    GPT-Neo: 오픈소스 LLM 생태계의 시발점

    • EleutherAI
    • Global-Attention
    • GPT-Neo
    • Local-Attention
    • Open-Source
    • Open-Source-LLM
    • Sparse-Attention
    • The-Pile
  • 2026년 7월 21일

    GPT-J: RoPE와 Parallel Transformer의 선구자

    • EleutherAI
    • GPT-J
    • JAX
    • Open-Source
    • Open-Source-LLM
    • Parallel-Transformer
    • Parallel-Transformer-Block
    • RoPE
    • The-Pile
  • 2026년 7월 21일

    OPT: GPT-3의 오픈소스 재현과 LLM 연구 민주화

    • GPT-3
    • Meta-AI
    • Open-Source
    • Open-Source-LLM
    • OPT
    • Pre-LayerNorm
    • reproducibility
    • Scaling-Laws
    • The-Pile
    • Transparency
  • 2026년 7월 21일

    DeepSeek-R1-Zero: SFT 없이 순수 RL만으로 추론이 창발한 최초의 대규모 모델

    • Aha-Moment
    • Chain-of-Thought
    • DeepSeek
    • Emergent-Behavior
    • GRPO
    • MoE
    • Open-Source
    • Pure-RL
    • Pure-RL-Training
    • R1-Zero
    • Reasoning
  • 2026년 7월 21일

    DeepSeek-R1: 순수 강화학습으로 o1에 필적하는 추론 AI의 민주화

    • Chain-of-Thought
    • DeepSeek
    • Distillation
    • GRPO
    • MoE
    • Open-Source
    • Pure-RL
    • Pure-RL-Training
    • R1
    • Reasoning
    • Self-Verification
  • 2026년 7월 21일

    Mistral Large 3 / Mistral 3: MoE 기반 대규모 언어 모델

    • Agentic-AI
    • Function-Calling
    • GQA
    • Mistral-AI
    • Mistral-Large-3-/-Mistral-3
    • MoE
    • Open-Source
  • 2026년 7월 21일

    Falcon: 데이터 품질이 모든 것을 결정한다

    • data-quality
    • Falcon
    • FlashAttention
    • GQA
    • Multi-Query-Attention
    • Open-Source
    • RefinedWeb
    • TII
  • 2026년 7월 21일

    BLOOM: 전 세계 연구자가 만든 오픈소스 다국어 LLM

    • 다국어
    • AI-민주화
    • ALiBi
    • ALiBi-Position-Encoding
    • BigScience
    • BLOOM
    • BLOOMZ
    • Multilingual-LLM
    • Open-Science
    • Open-Source
    • ROOTS

Created with Quartz v4.5.2 © 2026

  • GitHub
  • Discord Community