목록Audio (2)
On the journey of
1. 생성형 인공지능이란? 기계가 사람처럼 생각하고 행동할 수 있는 지능(추론, 문제해결, 창작, 개발을 할 수 있는 지적 능력)을 갖도록 만드는 기술을 의미한다. 이때 추론, 문제해결, 계획, 아이디어 이해 등은 전통적인 인공지능의 영역으로 예측, 판단, 분류 등에 활용되는 반면 창작, 개발 등 정답이 없는 생성형 인공지능 분야는 오디오, 코드, 텍스트, 영상 등 새로운 콘텐츠를 생성하는 데 사용할 수 있는 알고리즘을 포함한다. 이 중 생성형 AI는 Text, Images & Video, Audio(음성), Chatbots, Search(검색기능) 등 크게 5개 종류로 나눌 수 있다. 특히 검색기능의 경우, 검색기능 구현을 위해 NLP와 ML(머신러닝)을 같이 활용하기 때문에 아직 갈 길이 멀다(!)...
[논문읽기] VATT: Transformers for Multimodal Self-Supervised Learning from Raw Video, Audio and Text
Original Paper & Code ) https://paperswithcode.com/conference/neurips-2021-12 Papers with Code - The latest in Machine Learning Papers With Code highlights trending Machine Learning research and the code to implement it. paperswithcode.com Multi-modal task에 대해 여러 가지 관점에서 공부하고 있는데 (물론 시험이 먼저지만 ^.^) , 그 중 아래 그림이 알려주듯 8개 modality를 모두 실험해 본 논문이라고 주변에서 추천해줘서 읽게 됐다 :) 1. Abstract VATT는 raw signals를 in..