첨단 신체 추적 애플리케이션 개발 선도: 웹캠과 전면 전화 카메라 입력을 활용하여 유니티의 정교한 신체 추적 애플리케이션 개발을 주도했습니다. 이 프로젝트에는 정확한 신체 및 얼굴 추적과 움직임을 위한 미디어파이프, 역 운동학(IK) 및 블렌드 셰이프와 같은 기술이 통합되었습니다. 모바일 플랫폼에 대한 광범위한 최적화는 상당한 성능 향상을 가져왔고 회사의 주요 계약을 확보하는 데 중요한 역할을 했습니다. 인공지능 기반 대화형 아바타 개발: 음성과 텍스트 입력 모두에 실시간으로 반응할 수 있는 인공지능 기반 대화형 아바타를 성공적으로 개발했습니다. 여기에는 동적인 얼굴과 몸의 움직임을 위한 서버 측 추론 모델을 통합하는 것과 자연어 처리를 위한 ChatGPT 및 음성 인식을 위한 속삭임과 같은 최첨단 LLM 기술을 활용하는 것이 포함되었습니다. Unity와 Unreal Engine 모두의 숙련도가 중요하여 플랫폼 간 개발을 가능하게 했습니다. 이 프로젝트는 AI 아바타 기술에 대한 회사의 초점에 중추적인 변화를 가져왔고, 투자자와 고객의 상당한 관심을 끌었습니다. 추론 모델을 스마트폰 애플리케이션에 통합: Android Studio 및 JNI를 사용하여 추론 모델을 스마트폰 애플리케이션에 원활하게 통합하여 온디바이스 처리 기능을 향상시키고 모바일 플랫폼에서 애플리케이션 응답성 및 기능을 크게 향상시킵니다. 웹 개발 팀에 대한 중요한 지원: 고압적인 마감 시간 동안 웹 개발 팀에 필수적인 지원을 제공하여 주요 웹 사이트 프로젝트를 성공적으로 적시에 완료하는 데 기여합니다. 프론트 엔드 개발자와 긴밀히 협력하여 원활한 통합과 최적의 성능을 보장하기 위한 기술 지침 및 문제 해결 전문 지식을 제공합니다.

もっと見る

2D-to-3D 인간 이미지 변환 연구 및 개발: 2D 인간 이미지를 완전히 렌더링된 3D 아바타로 변환하는 최첨단 애플리케이션의 엔드 투 엔드 개발을 주도했습니다. 여기에는 매우 정확하고 현실적인 아바타 표현을 달성하기 위한 컴퓨터 비전, 이미지 처리 알고리즘 및 3D 모델링 기술에 대한 광범위한 연구가 포함되었습니다. 개발 프로세스를 향상시키기 위해 블렌더 플러그인, 블렌더 파이썬, 미디어파이프, OpenCV 및 관련 오픈 소스 연구를 포함한 다양한 도구와 기술을 통합했습니다. 이 프로젝트의 성공적인 실행은 회사가 기술의 혁신과 잠재적 영향을 인정하면서 상당한 정부 보조금을 받는 데 직접적으로 기여했습니다. 3D 비디오 플레이어를 위한 메쉬 추적 기술 개발: 모델에 사용된 삼각형 수와 텍스처를 최적화하는 데 중점을 둔 3D 비디오 플레이어를 위한 고급 메쉬 추적 시스템을 설계했습니다. 이 최적화는 최종 출력의 시각적 충실도를 손상시키지 않고 달성되어 3D 콘텐츠 렌더링의 성능과 효율성을 크게 향상시켰습니다. 언리얼 엔진을 위한 사실적인 천 편집 플러그인 개발: 매우 사실적인 천 편집과 시뮬레이션을 가능하게 하도록 설계된 언리얼 엔진을 위한 맞춤형 플러그인을 개발했습니다. 이 도구는 천 모델링의 정확성과 효율성을 향상시켜 엔진 내에서 더 상세하고 실제와 같은 애니메이션을 구현할 수 있도록 했습니다.

もっと見る