분류 전체보기
-
Mahalanobis Distance(마할노비스 거리)ML&DL 이야기/ML 2024. 7. 3. 15:25
Mahalonobis Distance는 맥락을 고려한, 분포를 고려한 거리를 의미한다. 우선 참고한 내용들에 따라 본 글에서도 행벡터를 기본적인 기본방향으로 하겠다. 이는 아래와 같이 데이터가 구성되기 때문이다. 보통 선형대수 등 수학에서는 column vector, 열벡터를 기본 방향으로 하고, 이에 따라 행과 벡터의 곱 등 많은 부분이 정의되기에 곱의 순서 등에 있어서 행벡터를 기본방향으로 한다는 것은 많은 부분이 변형된다는 것을 의미한다. 즉, Matrix D가 표본의 수가 n이고 Feature가 d라고 한다면, D를 n * d 차원의 행렬로 표현한다. 맥락은 표준편차다아래의 그림을 보자. 보면 주황색과 노란색 점끼리의 거리는 L2 norm 혹은 유클리디안 거리 관점에서는 원점으로부터 동일한 거리..
-
Norm에 관한 정리 L1, L2, Frobenius normML&DL 이야기/ML 2024. 7. 3. 13:46
기계학습 및 딥러닝에 관한 일부 자료들을 보다보면, loss에서 Mahalnobis distance를 이용하는 경우가 있다. 해당 내용을 정리하면서 동시에 Norm들에 관해 정리하려고 한다(Norm에 관한 내용도 많이 나온다) NormNorm, 노름 이라고 불리는 것은 벡터의 크기(혹은 길이)를 측정하는 함수이다. 다시 말해 두 벡터 간의 거리를 측정할 때에도 사용가능하다. Norm은 거리이기에 거리의 다양한 속성들을 만족해야하며 이는 아래와 같다. 1. Subadditivity/Triangle inequality: 𝑝(𝑥+𝑦)≤𝑝(𝑥)+𝑝(𝑦) for all 𝑥,𝑦∈𝑋.2. Absolute homogeneity: 𝑝(𝑠𝑥)=|𝑠|𝑝(𝑥) for all 𝑥∈𝑋 and al..
-
[Finance&OR&ML] 금융 및 최적화 관련 참고할 학술지개발 이야기/TIL 2024. 7. 3. 00:06
아직도 어떤 학술지를 믿고..! 어떤 논문을 찾아봐야할지는 정말 잘 모르는것 같다. 이번에는 금융 및 재무 분야 학술지와 OR, 최적화 분야의 학술지들을 추가해서 작성해보았다. 간단히 정리해보았고, 학회 리스트는 Unisit Felab의 Journal Club에 작성된 학술지들을 참고하였다. 전통적인 재무 학술지Journal of Finance (JF) 재무 분야에서 가장 권위 있는 학술지 중 하나로, 광범위한 재무 주제를 다룸 Review of Financial Studies (RFS) 높은 영향력을 가진 재무 학술지로, 최신 재무 연구를 폭넓게 다룸 Journal of Quantitative and Financial Analysis (JFQA) 정량적 방법론을 활용한 재무 분석에 중점을 둔 학술지 J..
-
Decision-Focused Learning: Foundations, State of the Art,Benchmark and Future Opportunities 리뷰 1 (DFL 개론)ML&DL 이야기/ML 2024. 7. 2. 14:30
https://arxiv.org/abs/2307.13565 Decision-Focused Learning: Foundations, State of the Art, Benchmark and Future OpportunitiesDecision-focused learning (DFL) is an emerging paradigm that integrates machine learning (ML) and constrained optimization to enhance decision quality by training ML models in an end-to-end system. This approach shows significant potential to revolutionizearxiv.org Decisio..
-
[TAF] 시계열 Air Passenger Forcasting Project전공&대외활동 이야기/전공 프로젝트 모음 2024. 7. 1. 16:34
과제uploaded dataset(AirPassengers.csv) provides number of monthly passengers of airlines over a period of 12 years (from 1949.01 to 1960.12). Please find the best ARMA model by satisfying the conditions in below.Use the first 10 years for estimation and rest of 2 years for one-step ahead forecasting.Please check the stationarity. If needed, you may need to use a d-th difference of yt or ARIMA(p, ..
-
[Error] sh syntax error: unexpected end of file개발 이야기/TIL 2024. 4. 26. 14:48
Error shell script를 실행하던 중 아래의 에러가 발생했다LongForecasting/Linear/exchange_rate.sh: not found-LongForecasting/Linear/exchange_rate.sh: 1:scripts/EXP-LongForecasting/Linear/exchange_rate.sh: 67: Syntax error: end of file unexpected (expecting "then")"""" 현재 환경은 ubuntu에서 shell script를 돌리려고했었고(이전 window multiprocessing관련 에러로 인해) sh 파일의 경우에는 문제가 없었다..(친구의 맥에서는 문제없이 돌아가는걸 확인) 한참을 해매하다가 https://thumbsupge..
-
[Error] github에 공개된 모델을 돌려보는 법(sh, window multi process error)개발 이야기/TIL 2024. 4. 25. 14:37
최근 캡스톤을 진행하면서 기존에 발표된 모델들을 하나씩 찾아보고, 실행이 필요한 경우 실행하고 있는데...!보통 아래와 같이 공개 github이 있는 경우 친절하게 방법들을 설명해두었다. 문제는 git clone하고까지는 문제없이 진행했지만, sh 명령어가 윈도우에서 가끔 안 먹는 경우가 많아서 ㅎㅎㅎ 방법을 간단히 정리할겸 블로그에 글을 쓰게 되었다. 1. Git clone하기!우선 보고자하는 논문의 모델이 공개된 경우 github에 공개된 경우가 많다. 해달 repository를 포크 뜬 다음에 git clone 명령어를 통해서 내 로컬에 다운받도록 하자. 명령어는 아래와 같다. git clone [해당 repo 링크] 2. Dataset 다운 dataset의 경우 보통 repository가 아닌 ..
-
[Time-series] A Time Series Is Worth 64 Words: Long-Term Forecasting With Transformers (ICLR 2023, PatchTST)Paper Review(논문이야기) 2024. 4. 25. 09:18
https://arxiv.org/abs/2211.14730 A Time Series is Worth 64 Words: Long-term Forecasting with TransformersWe propose an efficient design of Transformer-based models for multivariate time series forecasting and self-supervised representation learning. It is based on two key components: (i) segmentation of time series into subseries-level patches which are servearxiv.org논문코드: https://github.com/yuq..