[논문 구현] 멀티모달 병목 트랜스포머(MBT) PyTorch 구현 및 RAVDESS 감정 인식 테스트
·
1. AI 논문 + 모델 분석/AI 논문 분석
1. 프로젝트 개요이번 프로젝트는 비디오(시각)와 오디오(청각) 데이터를 효율적으로 융합하는 아키텍처를 제안한 논문, Attention Bottlenecks for Multimodal Fusion (NeurIPS 2021)의 아이디어를 직접 PyTorch로 구현해 본 기록입니다.논문의 핵심인 멀티모달 병목(Bottleneck) 구조가 실제로 어떻게 작동하는지 확인하기 위해, Kaggle의 RAVDESS (배우 감정 인식 비디오/오디오) 데이터셋을 활용하여 화자의 감정을 8가지로 분류하는 모델을 구축하고 테스트를 진행했습니다. 논문 링크:https://arxiv.org/abs/2107.00135 Attention Bottlenecks for Multimodal FusionHumans perceive the..
[Memo] Google Colab에서 작성한 코드 GitHub로 업로드하기
·
3. 자습 & 메모(실전, 실습, 프로젝트)/3-2 메모(실전, 프로젝트)
Google Colab과 Drive에서 작업한 .ipynb 파일들을 GitHub 리포지토리로 바로 푸시(Push)하는 방법 정리. 매번 명령어가 헷갈릴 때 참고용.1. 깃허브 리포지토리 복제 (Clone)먼저 코랩 환경으로 내 깃허브 저장소를 가져온다.# 1. 내 리포지토리 Clone!git clone https://github.com/gonida1010/data_analysis.git# 2. 현재 위치 확인 (선택사항)!pwd2. 구글 드라이브 파일 → 로컬 리포지토리로 복사 (cp)드라이브에 있는 노트북 파일들을 방금 클론한 폴더(/content/data_analysis/)로 복사한다. (경로에 공백이 있다면 따옴표 ""로 감싸주는 것이 필수)# 파일 복사 명령어 (cp 원본경로 목적지경로)# [옵션..
GitHub | 나만의 홈페이지 제작 후 GitHub 업데이트하기
·
개념 정리 step1/Git | GitHub
안녕하세요! 오늘은 제작하고 수정을 통해 만들어낸 홈페이지를 GitHub에 업데이트를 해보았습니다.⭐👻 https://gonida1010.github.io/MyWebSite/ GonHomeGON Home 항상 당신을 응원합니다gonida1010.github.io1. 수정 1-1 HTML 수정 연락처 이력서 HTML의 main에 해당하는 연락처 마우스 동작을 수정했습니다. a태그를 #section으로 설정하고 footer부분에 id 클래스를 추가해서 클릭시, 스크롤이 연락처에 도달할 수 있도록 수정했습니다. (Contact) Email: pak101044@gmail.com | Phone: 010-9942-1490 1-2 CSS파일 수정다음은 css를 수정해서 동작들을 꾸며봤습니..