목표 달성을 위해 유연하게 사고하고, 추진력 있게 도전합니다. 명확하게 소통하고, 알기 쉽게 공유합니다. 넓은 스펙트럼에서 업무의 맥락을 파악하며 일합니다.
eunee.stella@gmail.com +82-10-2892-4601학력사항 | Education
광주과학기술원
융합기술학제학부 문화기술학 (공학석사) 2022.03 ~ 2024. 02
경희대학교
사회학과, 응용수학과 (사회학사, 이학사) 2017.03 ~ 2021.08
University of Turku
Department of Mathematics (Exchange Student) 2019.08 ~ 2019.12
게임 콘텐츠를 연구하는 인지 및 지능 연구실에서 human motion generation ・ estimation 을 연구해 왔습니다.
동료들과 함께 2건의 연구 과제에 참여하며 SIGGRAPH Poster 1저자 개제, 2건의 특허 출원을 완료했습니다.
문화 콘텐츠의 사회적 영향력을 정량적으로 분석하는 역량을 기르기 위해 사회학과 응용수학을 복수전공했습니다.
한국사회과학자료원에서 통계분석 실습 강의를 진행하며 명확한 문서화와 프레젠테이션 능력을 길렀습니다.
나아가, 콘텐츠를 만드는 AI 기술에 대한 관심으로 문화기술학 석사과정에 진학하였습니다.
논문 | Publication
Automatic Sign Dance Generation with Diffusion Based Inpainting
Eunhee Kim and Kyung-Joong Kim
Master’s Thesis, 2024.
보유 기술 | Skills & Tools
Language
•
Python / PyTorch
◦
목적에 맞는 custom dataset class를 구축하여 학습에 사용할 수 있습니다.
◦
모션캡쳐, FBX 애니메이션, 생체 신호, 센서 데이터 등 다양한 데이터셋을 수집할 수 있으며, 적합한 뉴럴넷을 설계하고 학습, 추론할 수 있습니다.
◦
•
C# / Unity
◦
Unity를 이용해 차량용 XR 콘텐츠를 제작하는 프로젝트에 참여했습니다. GPS 센서 정보를 GameObject의 움직임에 동기화하였고, 주행 경로를 따라 인터랙션하는 FPS 게임을 제작했습니다.
◦
연구 프로세스 중, 손가락을 포함한 세밀한 motion animation을 합성하기 위해 Animator Component를 사용했습니다.
•
R / SPSS
◦
R과 SPSS를 이용해 통계 검정을 수행할 수 있습니다. 사회학과와 응용수학과 통계학 강의에서 A학점을 달성했고, 우수한 통계 분석 보고서 작성으로 최우수 포트폴리오 장학과 학부생 연구장학을 수상했습니다.
◦
한국사회과학자료원(KOSSDA)에서 R을 활용한 통계분석 강의의 실습조교로 활동했습니다. 매주 5시간 분량의 실습 강의 자료를 준비하고, 강의를 진행하며 알기 쉬운 방법으로 기술 지식을 전달하고자 노력했습니다.
•
MATLAB
◦
MATLAB toolbox을 이용해 양안 카메라의 파라미터를 추정하는 calibration을 진행했습니다.
◦
카메라의 정보를 보정하고, 이를 바탕으로 2D human pose를 3D로 복원할 수 있습니다.
DevOps
•
Git / GitHub :Git을 사용하여 프로젝트를 관리하며 협업할 수 있습니다.
•
Docker : Linux CLI으로 AI 모델 학습을 위한 독립적인 환경을 구성하고, Docker Hub을 통해 공유할 수 있습니다.
Graphics
•
Photoshop / Illustrator : 목적에 맞는 이미지와 웹 페이지 배너, 로고 디자인을 할 수 있습니다.
•
Blender : Python 스크립트를 이용해 3D object를 생성하고 관리할 수 있으며, 애니메이션을 적용하고 렌더링할 수 있습니다.
•
Premiere Pro : 연구 ・ 개발 과정과 결과를 설명할 수 있는 동영상을 촬영하고 적절한 편집을 할 수 있습니다.
프로젝트 | Projects
청각장애인의 음악향유를 위한 음악 및 댄스 실감가시화 기술 개발
한국콘텐츠진흥원, 2022.03.01 ~ 2023.12.31
팀원 5명
청각장애인과 비장애인이 함께 음악을 향유할 수 있도록,
음악의 청각 정보를 시각 정보로 변환 및 표현하기 위한 실감가시화 기술을 개발했습니다.
음악에 어울리는 dance motion을 생성함으로써, 다양한 humanoid character에 적용 가능한 애니메이션 결과물을 제공합니다. 기존 music to motion generation 기술은 음악의 가사 정보를 명시적으로 전달할 수 없었습니다. 관성식 모션캡쳐 시스템(Nansens)을 이용해 직접 34,000+ 프레임 상당의 한국 수어 모션캡쳐 데이터셋을 구축했습니다. VQ-VAE + GPT 기반 motion generation model을 파인튜닝해서, 수어 표현에 적절한 dance motion 생성 결과를 고도화했습니다. Unity Animator Component를 이용해 손가락 단위의 세밀한 FBX Animation을 합성하여 제공했습니다. 압력 감지 센서를 활용한 운동 모션 3D Pose Estimation
광주과학기술원, ‘인간중심 물리 시스템 설계를 위한 HCI + AI 융합연구’, 2022.05 ~ 2022.09
팀원 4명
Occlusion에 강건하고, 손쉽게 다양한 형태로 적용 가능한
비부착형 센서 기반 pose estimation 기술을 개발했습니다.
압력 센싱 시스템을 구축해 사용자의 압력 정보를 input으로 받아, 3D Keypoints를 제공합니다. 압력 정보를 실시간으로 스트리밍하는 시스템을 구축하고, 3D Pose Estimation에 필요한 네트워크를 설계해야 했습니다. 4개의 압력 감지 센서, 2개의 웹캠으로 이루어진 멀티모달 데이터 스트리밍 시스템을 구축하며, 데이터 스트리밍 병목을 개선했습니다. CNN Encoder-Decoder 구조의 신경망을 설계해 local한 2D 압력 정보로 3D Keypoints를 예측했습니다. 압력 감지 센서를 활용한 개인화 운동 보조 시스템 개발
광주과학기술원, ‘인간중심 물리 시스템 설계를 위한 HCI + AI 융합연구’, 2023.09 ~
팀원 5명
사용자가 집에서도 손쉽게 개인화된 운동 보조 콘텐츠를 즐길 수 있도록
압력과 카메라 정보를 이용한 virtual fitness training 기술을 개발했습니다.
나아가, 압력 정보를 바탕으로 생체 신호(EMG)를 예측하는 기능을 추가 중입니다.
압력과 카메라 정보를 동시에 제공해 개인화된 운동 경험을 실시간으로 제공합니다. 사용자와 virtual trainer의 상이한 신체 정보로 인해 Keypoints와 압력 정보의 직접 비교가 불가능했습니다. Keypoints와 압력 정보의 세기를 정규화해, 유의미한 차이가 발견되는 경우 시각적인 피드백을 제공하는 기능을 추가했습니다. Neural network을 이용해 압력 정보의 sequence로 근육별 EMG 신호를 예측하는 기능을 추가하여 논문 제출 예정입니다. 국내 및 해외(미국) 특허를 출원했습니다. GIST 해외특허 지원사업에 선정되었습니다.수상 | Honors
•
•
2020 경희대학교 밝은사회장학 (국제교류활동지원)
•
2019, 2020 경희대학교 경희꿈도전장학 (연구)
•
2019 경희대학교 수도권특성화사업 최우수 포트폴리오 장학
•
2018 경희대학교 수도권특성화사업 최우수 포트폴리오 장학
•
2017 경희대학교 사회학과 우수장학
자격증 및 어학 | License
•
OPIC IH (2024. 03 취득)
•
TOEIC 905 (2023. 10 취득)
•
사회조사분석사 2급 (2020. 09 취득)
eunee.stella@gmail.com +82-10-2892-4601최종 수정일 : 2024. 05. 02