More actions
imported>wraithkim No edit summary |
imported>wraithkim No edit summary |
||
| Line 14: | Line 14: | ||
* 참가자 : | * 참가자 : | ||
* [[OMS]] : [[권영기]] 학우 - '음악의 하이라이트 부분 추출 (Music Thumbnailing)' | * [[OMS]] : [[권영기]] 학우 - '음악의 하이라이트 부분 추출 (Music Thumbnailing)' | ||
동기: 2014년 겨울에 AI 연구실에서 진행 | * 동기: 2014년 겨울에 AI 연구실에서 진행 | ||
난관: 음악 모름, 추출방법 모름, 신호 분석 모름…..망….. | * 난관: 음악 모름, 추출방법 모름, 신호 분석 모름…..망….. | ||
진행 과정: | * 진행 과정: | ||
* 음악: MFCC 쓰라는 말 외에는 못 알아들음…. | * 음악: MFCC 쓰라는 말 외에는 못 알아들음…. | ||
음악은 아날로그로 된 signal인데 이를 mp3나 wav로 바꿀 때, MFCC를 이용 | 음악은 아날로그로 된 signal인데 이를 mp3나 wav로 바꿀 때, MFCC를 이용 | ||
| Line 22: | Line 22: | ||
이걸 구현하기 어려워서, 결국 MIR라이브러리 사용(TarsosDSP) | 이걸 구현하기 어려워서, 결국 MIR라이브러리 사용(TarsosDSP) | ||
Highlight Detection 구현하기: 구글에서 가장 많이 본 논문 이용 | Highlight Detection 구현하기: 구글에서 가장 많이 본 논문 이용 | ||
발상 | * 발상 | ||
# 사람이 가장 많이 기억하는 부분은 hook 부분 | # 사람이 가장 많이 기억하는 부분은 hook 부분 | ||
# hook은 계속 반복되는 부분 | # hook은 계속 반복되는 부분 | ||
# 반복이 많이 되는 부분을 뽑아낸다 | # 반복이 많이 되는 부분을 뽑아낸다 | ||
절차 | * 절차 | ||
구간을 나눠서 벡터로 표현한 후, 방향이 유사한지 계산해서, 비슷한 부분이 가장 많이 나오는 구간을 출력 -> Highlight Detection!!! | 구간을 나눠서 벡터로 표현한 후, 방향이 유사한지 계산해서, 비슷한 부분이 가장 많이 나오는 구간을 출력 -> Highlight Detection!!! | ||
시연!!! | * 시연!!! | ||
Gee – 소녀시대 | Gee – 소녀시대 | ||
거짓말 – 빅뱅 | 거짓말 – 빅뱅 | ||
싱숭생숭 – 다이나믹 듀오 | 싱숭생숭 – 다이나믹 듀오 | ||
한계 | * 한계 | ||
# 훅이 없으면 힘듬….. | # 훅이 없으면 힘듬….. | ||
# MFCC…., 공업수학과 멀티미디어 관련을 들어야 합니다… | # MFCC…., 공업수학과 멀티미디어 관련을 들어야 합니다… | ||
참고: TarsosDSP, Cosine Distance | * 참고: TarsosDSP, Cosine Distance | ||
** 자물쇠 비밀번호 변경~~! | ** 자물쇠 비밀번호 변경~~! | ||
* 진행 사항 공유 | * 진행 사항 공유 | ||
| Line 51: | Line 51: | ||
프로젝트AI: 플젝장이 너무 멀리 떨어져서 잠정 중단 | 프로젝트AI: 플젝장이 너무 멀리 떨어져서 잠정 중단 | ||
크로미늄파이: 빌드가 깨졌어여…엉엉, 수리중, 커널 올리는 건 성공, 창이 안 뜨는 걸 수리중… | 크로미늄파이: 빌드가 깨졌어여…엉엉, 수리중, 커널 올리는 건 성공, 창이 안 뜨는 걸 수리중… | ||
** [[데블스캠프2015]] | 던만추: 기말고사가 다가와서 휴식중 | ||
BMP: 깃에다 올려서 결과물을 내놓은 후, 계속 갈아낼 생각… | |||
모형차: 회장님이 시간이 없어서 진행속도가… | |||
** [[데블스캠프2015]] : 연례행사인 데블스캠프가 왔습니다. 세션 보러 많이 와주세요~ | |||
* MT????? | * MT????? | ||
** 7월 16일 이후 토일 | ** 7월 16일 이후 토일 | ||
Revision as of 09:53, 27 May 2015
예정
진행
- 참가자 :
- OMS : 권영기 학우 - '음악의 하이라이트 부분 추출 (Music Thumbnailing)'
- 동기: 2014년 겨울에 AI 연구실에서 진행
- 난관: 음악 모름, 추출방법 모름, 신호 분석 모름…..망…..
- 진행 과정:
- 음악: MFCC 쓰라는 말 외에는 못 알아들음….
음악은 아날로그로 된 signal인데 이를 mp3나 wav로 바꿀 때, MFCC를 이용
- MFCC: 시그널 모양을 설명하는 계수
이걸 구현하기 어려워서, 결국 MIR라이브러리 사용(TarsosDSP) Highlight Detection 구현하기: 구글에서 가장 많이 본 논문 이용
- 발상
- 사람이 가장 많이 기억하는 부분은 hook 부분
- hook은 계속 반복되는 부분
- 반복이 많이 되는 부분을 뽑아낸다
- 절차
구간을 나눠서 벡터로 표현한 후, 방향이 유사한지 계산해서, 비슷한 부분이 가장 많이 나오는 구간을 출력 -> Highlight Detection!!!
- 시연!!!
Gee – 소녀시대 거짓말 – 빅뱅 싱숭생숭 – 다이나믹 듀오
- 한계
- 훅이 없으면 힘듬…..
- MFCC…., 공업수학과 멀티미디어 관련을 들어야 합니다…
- 참고: TarsosDSP, Cosine Distance
- 자물쇠 비밀번호 변경~~!
- 진행 사항 공유
- 스터디 및 프로젝트 - 활동지도/2015
스위프트: 부처님 오셧기에… 미시시피: 보쌈 마있쪙, 부처님(2) 알고리즘스터디: 푼 문제를 기록하기 시작함, 참가자 프로필에서 코드를 읽어 볼 수 있다., 관심있는 분들은… codeforces.com에 참가하세요 자바를자바: 부처님(3) ann이요: 인공 신경망 공부중, 들어오고 싶으신 분은 slack의 machine learning 채널에서 연락주세요~ 일본어스터디: 현재 두명… 난자공: 인스턴스와 클래스 공부함 자료구족발보쌈: 동적할당을 몰라서 가르침… 다음에 스택과 링크드리스트 할 예정 D곱하기: 다이렉트X에 필요한 윈도우 프로그래밍 진행, 다음에는 수학 공부, 참고 동영상 구함, 들어오실 분은 기초부터 해야 되기 때문에 지금 오는 게 낫습니다. 열파참: 3학년이 대부분이라 휴식중… 프로젝트AI: 플젝장이 너무 멀리 떨어져서 잠정 중단 크로미늄파이: 빌드가 깨졌어여…엉엉, 수리중, 커널 올리는 건 성공, 창이 안 뜨는 걸 수리중… 던만추: 기말고사가 다가와서 휴식중 BMP: 깃에다 올려서 결과물을 내놓은 후, 계속 갈아낼 생각… 모형차: 회장님이 시간이 없어서 진행속도가…