[복합 인식 알고리즘 관련 업무] ○ 오디오 및 비디오 인공지능을 활용한 멀티모달 관제 시스템 연구 → 모델 분석 결과를 앙상블 하여 이벤트를 판단하는 알고리즘 [오디오 알고리즘 관련 업무] ○ 오디오 이벤트 분류 알고리즘 연구 → 약한라벨 기반의 광범위 오디오 데이터를 학습한 사전학습모델을 활용한 음향 분류 모델 → 다중채널 특징과 사전 이미지 학습모델, 시공간 데이터를 활용한 음향 분류 모델 → 마이크로폰 주파수 응답특성을 활용한 데이터 증강 기법 ○ 오디오 이벤트 및 음성 검출 알고리즘 연구 → A-weight 필터를 활용한 오디오 이벤트 검출 알고리즘 → Voice classification을 활용한 음성 이벤트 검출 알고리즘 ○ 오디오 방향추정 및 노이즈 제거 알고리즘 연구 → Logmmse, PWMF, MVDR, Music 등 알고리즘 → U-net 기반의 음원분리 알고리즘 ○ 음성 인식 알고리즘 연구 → Kaldi 기반의 LM모델 개선을 통한 짧은 음성 단어인식 알고리즘 → Kaldi 기반의 음성인식 알고리즘 → E2E 기반의 음성 인식 알고리즘 (Deepspeech2, wav2vec) ○ 딥러닝 모델 경량화 알고리즘 연구 → Quantization, Pruning 알고리즘 [비디오 알고리즘 관련 업무] ○ 객체 인식 알고리즘 연구 → MobileDet, EfficientDet을 활용한 객체인식 알고리즘 ○ 영상 이벤트 분석 알고리즘 연구 → 객체 트래킹 및 이를 활용한 침입, 배회, 카운팅 알고리즘 [시스템 개발 업무] ○ 이상음원 및 음성 분석 및 관제 운용 서버 시스템 개발 → RTSP 스트리밍을 통한 실시간 오디오 데이터 사용 → 9700K 1660Ti 기준 최대 80대 분석 가능 → 음원&음성 분석 및 방향탐지를 통한 PTZ카메라 연동 → 이상음원 발생지역 표기, 지역별 평균 소음도 측정, 서드 파티 연동, 통계지표 등 제공 ○ 이상음원 및 음성 분석 임베디드 시스템 개발 → ARM칩 기반의 저사양 보드를 위한 음원&음성분석 시스템 개발 → 음원&음성 및 분석 결과 전송, 방향탐지를 통한 PTZ카메라 연동 ○ 다채널 영상 객체인식 및 음성 음향 인식 임베디드 시스템 개발 → RPI4 + TPU 사양 기반의 보드를 위한 영상분석, 음성음향 인식 시스템 개발 → SD화질 기준 1채널 30FPS 최대 4채널 8FPS 객체 분석 및 이벤트 분석 시스템 구현 → 음원&음성 분석 및 결과 전송, 방향탐지를 통한 PTZ카메라 연동 [기타 성과] ○ 기술평가 A 흭득 ○ 특허 등록 5건 ○ 서버 플랫폼 GS인증 흭득 ○ ESC-50 Dataset SOTA 순위권 달성 ○ Dcase 2022, 2020 순위권 달성 ○ 2021 세계보안엑스포(SECON) 참여

더보기

[오디오 이벤트 검출 및 분류 연구] ○ 에트리 환경음 분류 산학과제 수행 → 데시벨 측정 솔루션을 위한 마이크로폰 제작 → 위험 환경에 대한 사운드 DB 구축 → 인공지능 활용 오디오 분류 관련 논문 11편 리뷰 및 4편 구현 및 실험 진행

더보기

[오디오 이벤트 검출 및 분류 연구] ○ LG전자 환경음 분류 산학과제 수행 → 다채널 마이크로폰과 PMWF를 활용한 실시간 음향상황 인지 모델 및 데모 개발 → 해외 논문 1편 게재

더보기

[사운드 디자인 업무] ○ 광고 사운드 디자인 ○ 애니메이션 사운드 디자인 [믹싱, 마스터링 업무] ○ 상업 음반 앨범 믹싱 및 마스터링 ○ 콘서트 앨범 믹싱 및 마스터링 [초실감 오디오 연구] ○ HRTF 기반의 초실감 오디오 연구 보조

더보기