I am a Ph.D. student at the Graduate School of Artificial Intelligence at POSTECH, advised by Prof. Namhoon Lee, researching optimization methods for the efficient training of large-scale machine learning systems.포항공과대학교 인공지능대학원 박사과정에 재학 중이며, 이남훈 교수의 지도하에 대규모 기계학습 시스템의 효율적 학습을 위한 최적화 방법론을 연구하고 있음.

My main areas are optimization for (a) distributed training, (b) neural network sparsification, and (c) general deep learning. I aim to uncover principles that secure training efficiency and scalability for extreme-scale machine learning systems under constrained infrastructure, and to build the learning algorithms and theoretical foundations that improve the utilization of existing computing resources.주요 연구 분야는 (a) 분산 학습, (b) 신경망 희소화, (c) 일반적인 딥러닝 학습을 위한 최적화 방법론임. 제한된 인프라 환경에서 초대규모 기계학습 시스템의 학습 효율성과 확장성을 확보하는 원리를 규명하고, 기존 컴퓨팅 자원의 활용도를 제고할 수 있는 학습 알고리즘 및 이론적 기반을 구축하는 것을 목표로 함.

News소식
Jul 2026 I’ll be giving a flash talk at Pluralis workshop @ ICML 2026 next Friday on a novel optimization method for asynchronous pipeline parallel training. 다음 주 금요일 ICML 2026 Pluralis 워크샵에서 비동기 파이프라인 병렬 학습을 위한 새로운 최적화 방법에 관해 플래시 토크 발표 예정.
Nov 2025 I am honored to have been selected as a winner of the Qualcomm innovation fellowship Korea 2025! 퀄컴 혁신 펠로우십 코리아 2025 수상자 선정
Nov 2025 Our new paper on achieving extreme LLM sparsity won the best paper award in JKAIA 2025! (related news) LLM 극한 고압축률에 관한 새 논문, JKAIA 2025 최우수논문상 수상 (관련 기사)
May 2025 One paper has been accepted to UAI 2025 🇧🇷: “Critical Influence of Overparameterization on Sharpness-aware Minimization”. 한 편의 논문이 UAI 2025 🇧🇷에 채택 — “Critical Influence of Overparameterization on Sharpness-aware Minimization”
May 2025 Two papers have been accepted to ICML 2025 🇨🇦: SAFE and Sassha. 두 편의 논문이 ICML 2025 🇨🇦에 채택 — SAFE, Sassha
Jul 2026 I’ll be giving a flash talk at Pluralis workshop @ ICML 2026 next Friday on a novel optimization method for asynchronous pipeline parallel training. 다음 주 금요일 ICML 2026 Pluralis 워크샵에서 비동기 파이프라인 병렬 학습을 위한 새로운 최적화 방법에 관해 플래시 토크 발표 예정.
Nov 2025 I am honored to have been selected as a winner of the Qualcomm innovation fellowship Korea 2025! 퀄컴 혁신 펠로우십 코리아 2025 수상자 선정
Nov 2025 Our new paper on achieving extreme LLM sparsity won the best paper award in JKAIA 2025! (related news) LLM 극한 고압축률에 관한 새 논문, JKAIA 2025 최우수논문상 수상 (관련 기사)
May 2025 One paper has been accepted to UAI 2025 🇧🇷: “Critical Influence of Overparameterization on Sharpness-aware Minimization”. 한 편의 논문이 UAI 2025 🇧🇷에 채택 — “Critical Influence of Overparameterization on Sharpness-aware Minimization”
May 2025 Two papers have been accepted to ICML 2025 🇨🇦: SAFE and Sassha. 두 편의 논문이 ICML 2025 🇨🇦에 채택 — SAFE, Sassha
Sep 2024 Excited to be working as a student researcher at Google for the next 12+ weeks! 향후 12주 이상 구글에서 학생 연구원으로 근무
Nov 2023 Our new paper on the effects of overparameterization on sharpness-aware minimization won the best paper award in JKAIA 2023! (related news) 과매개화가 sharpness-aware minimization에 미치는 영향에 관한 새 논문, JKAIA 2023 최우수논문상 수상 (관련 기사)
Oct 2023 Happy to release 🔨Malet: a Machine Learning Experiment Tool, available in pip! 🔨Malet: 머신러닝 실험 도구 pip 배포
Jul 2023 I’ll be joining ICML 2023 in person! Excited to visit Honolulu! ICML 2023 현장 참석 — 호놀룰루 방문 예정

Publications논문

* equal contribution공동 1저자 selected대표 논문C Conference학회J Journal저널U Under Review심사 중P Preprint프리프린트

2026
  1. Under Review
    [U2] (Optimization for Asynchronous Pipeline Parallel Training)
    Dongyeop Lee이동엽, Namhoon Lee이남훈
  2. Under Review
    [U1] (Exploring Possibility and Utility of Extreme Sparsity)
2025
  1. ICML25
    Spotlight (top 2.6%) Winner, Qualcomm Innovation Fellowship Korea 2025 arXiv code poster
    [C3] SAFE: Finding Sparse and Flat Minima to Improve Pruning
    Dongyeop Lee이동엽, Kwanhee Lee이관희, Jinseok Chung정진석, Namhoon Lee이남훈
  2. ICML25

Experience경력

Google구글 코리아
Student Researcher학생 연구원
Explored strategies to enhance calibration-data construction for LLM pruning.LLM 가지치기를 위한 보정 데이터 구성 전략을 연구함.
Brain AI Laboratory, Kyungpook National University뇌인공지능 연구실, 경북대학교
Undergraduate Researcher학부 연구원
Advised by Prof. Sangtae Ahn.안상태 교수 지도.
SK TelecomSK텔레콤
Research Fellowship연구 펠로우십
Conducted research on language–image multi-modal AI technology.언어-이미지 멀티모달 AI 기술을 연구함.
Republic of Korea Navy대한민국 해군
Korean–English Interpreter (PO2)한영 통역병 (병장)
Mandatory military service (ROK 2nd Fleet & 96th Submarine Squadron) as an interpreter.병역의무 — 해군 2함대·96잠수함전대에서 통역병으로 복무.

Education학력

POSTECH포항공과대학교
Ph.D., Graduate School of Artificial Intelligence박사과정, 인공지능대학원
Advised by Prof. Namhoon Lee · Member of the Computational Optimization Laboratory.이남훈 교수 지도 · 최적화연구실 소속.
POSTECH포항공과대학교
M.S., Graduate School of Artificial Intelligence석사과정, 인공지능대학원
Advised by Prof. Namhoon Lee · Member of the Computational Optimization Laboratory.이남훈 교수 지도 · 최적화연구실 소속.
M.S. thesis: “A Study on Enforcing Flat Minima to Improve Neural Network Sparsification”석사학위논문: “A Study on Enforcing Flat Minima to Improve Neural Network Sparsification”
Kyungpook National University경북대학교
B.S., Electronic Engineering학사, 전자공학

Honors & Awards수상

  • 2026Research Excellence Award학술대상 우수상CSE · GSAI · EE · CITE, POSTECH포항공대 CSE · GSAI · EE · CITE
  • 2025Outstanding Paper Award우수논문상BK21 GSAI, POSTECHBK21 인공지능대학원, 포항공대
  • 2025Qualcomm Innovation Fellowship Korea퀄컴 이노베이션 펠로우십 코리아Qualcomm퀄컴
  • 2025Best Paper Award최우수논문상Joint Conf. of Korean AI Association (10th)제10회 한국인공지능학회 추계학술대회
  • 2023Best Paper Award최우수논문상Joint Conf. of Korean AI Association (8th)제8회 한국인공지능학회 추계학술대회
  • 2017–22National Scholarship of Excellence국가이공계우수장학금Ministry of Science & ICT · KSAF과학기술정보통신부 · 한국장학재단

Talks & Exhibitions발표

  • 2026Flash talk, Pluralis Workshop @ ICML 2026플래시 토크, ICML 2026 Pluralis 워크샵Seoul서울"Novel Optimization for Asynchronous Pipeline Parallel Training"
  • 2025Poster presenter, Samsung AI Forum포스터 발표, 삼성 AI 포럼Suwon수원"SAFE: Finding Sparse and Flat Minima to Improve Pruning"
  • 2025Speaker, AI Graduate Schools (AIGS) Symposium발표자, 인공지능대학원(AIGS) 심포지엄Seoul서울"SAFE: Finding Sparse and Flat Minima to Improve Pruning"

Teaching강의

  • 2026Teaching Assistant, "Optimization for Data Science" (CSED490G)조교, "데이터 과학을 위한 최적화" (CSED490G)POSTECH & Yonsei포항공대 · 연세대
  • 2025Teaching Assistant, "Programming & Problem Solving" (CSED101, Python)조교, "프로그래밍과 문제해결" (CSED101, Python)POSTECH포항공대
  • 2023Teaching Assistant, "Machine Learning and Deep Learning"조교, "기계학습 및 딥러닝"POSCO AI Experts Training Program포스코 AI 전문가 양성 과정

Service학술 활동

  • Reviewer논문 심사UAI, NeurIPS

Patents특허

  • 2025Large Language Model Sparsification Method, Hardware Apparatus and Server대규모 언어 모델 희소화 방법, 하드웨어 장치 및 서버 Filed · KR 10-2025-0184411 · N. Lee, D. Lee, K. Lee, J. Chung출원 · KR 10-2025-0184411 · N. Lee, D. Lee, K. Lee, J. Chung
  • 2025Pruning Method for Deep Learning, Hardware Apparatus and Electronic Apparatus딥러닝을 위한 가지치기 방법, 하드웨어 장치 및 전자 장치 Filed · KR 10-2025-0184323 · N. Lee, K. Lee, H. Jang, D. Lee출원 · KR 10-2025-0184323 · N. Lee, K. Lee, H. Jang, D. Lee

Projects & Software프로젝트 및 소프트웨어

  • 2026pipelining-playgroundpipelining-playground An interactive explorer for pipeline-parallel training schedules파이프라인 병렬 학습 스케줄을 위한 인터랙티브 탐색기
  • 2023–25MaletMalet ML experiment tool for hyperparameter grid search, logging, and analysis하이퍼파라미터 그리드 서치, 로깅, 분석을 위한 ML 실험 도구
  • 2024speekspeek Slurm resource-peek CLI for GPU availability, usage, and job statusGPU 가용성, 사용량, 작업 상태를 확인하는 Slurm 자원 조회 CLI
  • 2022STARGenSTARGen Story-to-art generation for SKT's A. service using fine-tuned Stable DiffusionSKT A. 서비스를 위한 파인튜닝 Stable Diffusion 기반 스토리-아트 생성
  • 2022KiDuckKiDuck Virtual-pet HW/SW platform for hospitalized school-age children입원 학령기 아동을 위한 가상 펫 양육 HW/SW 플랫폼

Skills기술

  • Programming프로그래밍PythonPythonCCC++C++JavaJava
  • Markup마크업LaTeXLaTeXMarkdownMarkdownTypstTypst
  • ML Frameworks머신러닝 프레임워크Jax/FlaxJax/FlaxOptaxOptaxPyTorchPyTorch
  • Tools도구LinuxLinuxGitGitSlurmSlurm
  • Languages언어Korean (native)한국어 (모국어)English (fluent — TOEIC 960, TOEFL 106)영어 (유창 — TOEIC 960, TOEFL 106)
  • Interests관심사Piano피아노Toy projects (Leanprover, Vim)개인 프로젝트 (Leanprover, Vim)Video editing영상 편집