아티클 3

ㅇㅇ · 2024.04.26 16:29:50

[컴퓨터가 사물을 보는 방법, CNN 이론 - 1편]

https://blogs.sas.com/content/saskorea/2023/09/08/%EC%BB%B4%ED%93%A8%ED%84%B0%EA%B0%80-%EC%82%AC%EB%AC%BC%EC%9D%84-%EB%B3%B4%EB%8A%94-%EB%B0%A9%EB%B2%95-cnn-%EC%9D%B4%EB%A1%A0-1%ED%8E%B8/

[컴퓨터가 사물을 보는 방법, CNN 이론 - 2편]

https://blogs.sas.com/content/saskorea/2023/09/25/%EC%BB%B4%ED%93%A8%ED%84%B0%EA%B0%80-%EC%82%AC%EB%AC%BC%EC%9D%84-%EB%B3%B4%EB%8A%94-%EB%B0%A9%EB%B2%95-cnn-%EC%9D%B4%EB%A1%A0-2%ED%8E%B8/

[[기계분야 인공지능 최신 연구 동향] 컴퓨터 비전 주요 연구 동향]

https://youtu.be/Mt4z8pEZL90?si=eyszjxKymeGyf99N

AlexNet과 VGG는 굉장히 단순하게 구성되어 있지만, ResNet의 핵심인 Skip Connection 개념은 한번 보고 이해하는 것이 굉장히 어렵습니다 (저는 그랬습니다.) 그래서, 여러분들의 이해를 돕기 위해 유용한 영상을 가져왔습니다. ResNet이 이해가 잘 안 되신다면, 아래 영상들을 추천드립니다!

[ResNet의 Skip-connection 제대로 이해하기! - 혁펜하임]

https://www.youtube.com/watch?v=Fypk0ec32BU

[CNN ResNet SENet - 고려대학교 오승상]

https://www.youtube.com/watch?v=DFdjW7a55b0

[CNN - 메디픽셀 송교석]

https://www.youtube.com/watch?v=rdTCxAM1I0I&list=PL1Kb3QTCLIVtyOuMgyVgT

-OeW0PYXl3j5&index=6

어떠한 문제를 풀 때, 주어진 데이터 이외에도 외부 데이터 혹은 공개된 데이터를 활용하여 일반화 성능을 높이는 것이 중요합니다. 그러한 데이터셋을 모아둔 사이트들 중, 가장 유명한 세 가지를 공유합니다

[UC Irvine의 Machine Learning Repository]

https://archive.ics.uci.edu/datasets

[awesome-public-datasets]

https://github.com/awesomedata/awesome-public-datasets

[AIHub]

https://www.aihub.or.kr/

객체 검출을 포함한 최신 컴퓨터 비전 모형들은 처음부터 구현하기보단 어느정도 갖춰진 파이프라인 위에서 모형들을 구현하고, 검증하는 편입니다. 따라서, 우리가 프로젝트를 수행하거나, 연구를 수행할 때 이러한 라이브러리를 기반으로 시작하게 되면 굉장히 편하게 초기 실험들을 진행할 수 있습니다.

open-mmlab의 mmdetection : 거의 모든 객체 탐지 알고리즘과 관련된 모듈들을 구현해놓은 패키지

ultralytics의 ultralytics (YOLOv8, YOLOV5, 등) : 실시간 서비스를 위한 YOLO계열 모형들에 특화된 패키지

PaddlePaddle의 PaddleDetection : 병렬 처리에 최적화된 객체 탐지 알고리즘 라이브러리

실험 기록 및 다양한 ML 개발자를 위한 기능을 제공해주는 WandB와 WandB를 활용한 하이퍼파라미터 최적화에 대한 글

WandB: MLOps 도구 중 하나로, 실험 기록부터 데이터 저장, 실험 추적 등 다양한 기능을 제공합니다.

https://wandb.ai/site

Wandb.Sweep: 하이퍼파라미터 튜닝을 해주는 도구 중 하나로, 랜덤, 그리드, 베이지안 서치를 제공합니다. (예제)

https://docs.wandb.ai/guides/sweeps

BAYESIAN OPTIMIZATION 개요: 딥러닝 모델의 효과적인 HYPERPARAMETER 탐색 방법론: 베이지안 최적화를 하이퍼파라미터 최적화에 적용하는 방법과 내용이 잘 정리되어 있습니다.

https://www.cognex.com/ko-kr/blogs/deep-learning/research/overview-bayesian-optimization-effective-hyperparameter-search-technique-deep-learning-1

CV 모델에 가장 기본이 되는 Pillow 라이브러리와 협업을 위한 wandb 라이브러리에 대한 블로그

Pillow: https://gist.github.com/yunwoong7/e61e9abb419f35d9ade8f95b3cc3e696

wandb 1: https://pebpung.github.io/wandb/2021/10/06/WandB-1.html

wandb 2: https://pebpung.github.io/wandb/2021/10/10/WandB-2.html

hyperparameter들이, 실제 최적화에서는 성능에 얼마나 큰 영향을 미칠 수 있는지에 대해 보여줄 수 있는 아티클로 준비했습니다.

Learning rate & Batch size: https://inhovation97.tistory.com/32#:~:text=learning%20rate%EA%B0%80%20%ED%81%AC%EB%A9%B4%2C%20%ED%95%9C,%EC%A0%81%EB%8B%A4%EB%8A%94%20%EC%9E%A5%EC%A0%90%EB%8F%84%20%EC%9E%88%EC%8A%B5%EB%8B%88%EB%8B%A4.

오버피팅 피하는 방법: https://box-world.tistory.com/16

Grid Search: https://huidea.tistory.com/32

[멀티 모달]

https://channeltech.naver.com/contentDetail/25

https://bo-10000.tistory.com/204

https://github.com/tabtoyou/KoLLaVA

[ MLOps에 대한 간단한 소개와 HuggingFace 사용 방법 및 Fine-tuning]

최근 HuggingFace를 사용할 일이 많아서 코드를 이리 저리 뜯어보고 있는데, MLOps 직무에서 HuggingFace만 잘 써도 할 수 있는게 많아지겠다는 생각이 들더라구요. 한편으로는, HuggingFace코드와 모델카드를 읽어보면 HuggingFace를 유지하는 것 또한 만만한 일이 아니라는 것을 알게 되었습니다.

https://jaemunbro.medium.com/mlops%EA%B0%80-%EB%AC%B4%EC%97%87%EC%9D%B8%EA%B3%A0-84f68e4690be

https://seungbeomdo.tistory.com/78

https://mvje.tistory.com/117

https://seungbeomdo.tistory.com/79

[ hyperparameter tuning 방법론과 라이브러리 소개, 기존과 중복 있뇨]

Bayesian Optimization: https://www.cognex.com/ko-kr/blogs/deep-learning/research/overview-bayesian-optimization-effective-hyperparameter-search-technique-deep-learning-1

Grid Search를 위한 library 1: https://tutorials.pytorch.kr/beginner/hyperparameter_tuning_tutorial.html

Grid Search를 위한 library 2: https://docs.kanaries.net/ko/topics/Data-Science/randomized-search-verbose

Learning rate scheduler: https://wikidocs.net/157282

[제너레이션 모델 최신 동향]

최신 이미지 생성 AI (1) Adobe Firefly 3:

https://news.adobe.com/news/news-details/2024/Adobe-Introduces-Firefly-Image-3-Foundation-Model-to-Take-Creative-Exploration-and-Ideation-to-New-Heights/default.aspx

https://firefly.adobe.com/

최신 이미지 생성 AI (2) 구글 Imagen 2:

https://deepmind.google/technologies/imagen-2/

https://www.nytimes.com/interactive/2024/01/19/technology/artificial-intelligence-image-generators-faces-quiz.html

[MLE]

MLE와 쿨백-라이블러 발산:

https://en.wikipedia.org/wiki/Maximum_likelihood_estimation#Relation_to_minimizing_Kullback%E2%80%93Leibler_divergence_and_cross_entropy

MLE와 분포 모델링의 관계:

https://deepgenerativemodels.github.io/assets/slides/cs236_lecture4.pdf

[ [오토인코더와 VAE 강의 영상]]

https://youtu.be/o_peo6U7IRM?si=utUcw3SfLKPNteNi

https://youtu.be/rNh2CrTFpm4?si=urLGPOlnPs

-A6qCI

https://youtu.be/LeVkjCuUdRs?si=GNfMQeCjU

-xNTeN-

[변분 오토 인코더의 이해]

https://en.m.wikipedia.org/wiki/Kullback%E2%80%93Leibler_divergence#Multivariate_normal_distributions

https://arxiv.org/abs/1906.02691

[변분 오토 인코더 실습]

https://www.tensorflow.org/tutorials/generative/cvae?hl=ko

https://pyimagesearch.com/2023/10/02/a-deep-dive-into-variational-autoencoders-with-pytorch/

[벡터 양자화 변분 오토 인코더의 이해]

https://youtu.be/VZFVUrYcig0?si=MS3AHIH93Uze3yJI

번호	말머리	제목	글쓴이	작성일	조회	추천
2863	설문	시세차익 부러워 부동산 보는 눈 배우고 싶은 스타는?	운영자	24/05/27	-	-
468104	일반	알트만은 팀쿡과 동성애를 즐겼다	ㅇㅇ(218.55)	05.14	16	0
468103	일반	지금 나오는 영상이랑 브금 gpt가 만든거임? [1]	ㅁㄱㅌㅊ(39.122)	05.14	50	0
468102	일반	얼마나 '개씹놀라운'을 보여줄려고 이렇게 뜸들이는거임?	퐁칸8	05.14	31	0
468101	일반	미국은 왜 관심이 적은거임?? [6]	ㅇㅇ(14.39)	05.14	149	1
468100	일반	선형충들 승리면 안된다	헬스토끼	05.14	40	0
468099	일반	그래서 2시쯤 오면됨?	ㅇㅇ(59.31)	05.14	14	0
468098	일반	실방에 삼만명 넘음	ㅇㅇ(125.188)	05.14	46	0
468097	일반	특이점이 온 세계는 맡길게요	Singnice	05.14	27	0
468096	일반	gpt4 업댓?	ㅇㅇ(58.29)	05.14	29	0
468095	일반	Gpt4 업데이트?ㅋㅋㅋㅋㅋㅋ	ㅇㅇ(58.29)	05.14	67	0
468094	일반	노래 좀더 신나짐 ㅋㅋ	ㅇㅇ(121.124)	05.14	21	0
468093	일반	선형충 승리할까봐 조마조마한 특붕이면 개추 ㅋㅋㅋ	ㅇㅇ(121.124)	05.14	15	0
468092	일반	털드만 머스크 했네	ㅇㅇ(220.116)	05.14	19	0
468091	일반	근데 ㄹㅇ 생각만큼 관심도가 높지 않노	ㅇㅇ(115.139)	05.14	63	0
468090	일반	제밯	노(125.191)	05.14	11	0
468089	일반	노래 바꼈다 ㅋㅋㅋㅋㅋ	ㅇㅇ	05.14	25	0
468088	일반	월2코가 안오르는게 쎄하노.. [6]	확률게임	05.14	115	0
468087	일반	드럼 시작됐다 [1]	자애	05.14	24	0
468086	일반	지금까지 지구 시뮬레이션을 플레이 해주셔서 감사합니다.	RR(210.221)	05.14	31	0
468085	일반	4업뎃이 4.5일수도있지 씨발련들아 [3]	ㅇㅇ(125.183)	05.14	92	0
468084	일반	선형충 승리 20분 전ㅋㅋㅋ	ㅇㅇ(58.124)	05.14	38	0
468083	일반	딱 보면 모르겠냐	ㅇㅇ(58.29)	05.14	54	0
468082	일반	한시라 선동한 새끼 누구냐	ㅇㅇ(182.209)	05.14	46	0
468081	일반	귀칼 보ㅓ야지 [1]	타비타비	05.14	34	0
468080	일반	근피티4 업데이트하고 끝이면	어브리	05.14	35	0
468079	일반	씨발 gpt4 업데이트임?	ㅇㅇ	05.14	129	0
468078	일반	의외로 삼성보다 라이브 관심도가 적나?	ㅇㅇ(121.124)	05.14	129	0
468077	일반	아 두시군아. [1]	능지상승	05.14	74	0
468076	일반	무려 gpt가 글자를 튕길 수 있게 됩니다! 매우 놀라운! [3]	비닌	05.14	110	0
468075	일반	AGI 2040	ㅇㅇ(218.153)	05.14	23	0
468074	일반	10am PT가 한국시간으로 새벽2시네 개씨발 [1]	ㅇㅇ(221.164)	05.14	115	0
468073	일반	gpt4 update면 새로운게 맞나....? [14]	부패하는유전자!!!	05.14	257	0
468072	일반	트만아... 지금까지 깔아둔 거	초존도초	05.14	46	0
468071	일반	글자튀기는거 LLM 모델 의미하는거네	ㅇㅇ(220.117)	05.14	57	1
468070	일반	오늘 드디어 "애미씨발개좃되는걸개발했고" 를 볼 수 있네	ㅇㅇ(211.179)	05.14	53	0
468069	일반	미국인들은 open ai에 별관심 없구나 [1]	ㅇㅇ(1.245)	05.14	117	0
468068	일반	자러간다	ㅇㅇ(125.178)	05.14	26	0
468067	일반	지금 피자 시키면 딱이겠네	이세이미야케	05.14	18	0
468066	일반	채팅 왜막냐 근데 [2]	ㅇㅇ(115.139)	05.14	100	0
468065	일반	실북갤 15위 입갤ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ [1]	ㅇㅇ(121.131)	05.14	84	0
468064	일반	AGI가 생성한 마인크래프트 브금 [1]	초존도초	05.14	51	0
468063	일반	새벽 2시이네 난 아무래도 틀린 거 같다	ㅇㅇ	05.14	47	0
468062	일반	걍 업뎃내용만 읊고 끝날각 [1]	ㅇㅇ(222.112)	05.14	63	0
468061	일반	시작!ㄷㄷ	ㅇㅇ(125.137)	05.14	16	0
468060	일반	스포)Hello, world! [3]	ㅇㅇ(58.29)	05.14	181	1
468058	일반	현재 시청중인30000명의 시청자분만 특이점을 누리실 수 있습니다. [3]	ㅇㅇ	05.14	122	0
468056	일반	치킨 왔다고 ㅆㅃ	ㅇㅇ(59.13)	05.14	24	0
468055	일반	철구도 방송하면 5만명보는데 oai실망이네	ㅇㅇ(218.153)	05.14	41	0
468054	일반	지금 절대 자러가지 마라 55분만 기다리면 신세계가 오는데??	츄츄(183.109)	05.14	25	0
468053	일반	아니 이럴거면 한 20분전에 시작하지 ㅋㅋㅋ	ㅇㅇ	05.14	18	0

최근 방문

즐겨찾기

즐겨찾기 갤러리

마이너 갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

마이너 갤러리 소개

차단하기

[특이점이 온다 갤러리]

갤러리 본문 영역

게시물을 간편하게 NFT로 만들어 보세요!

NFT 발행 방법

NFT 발행

비회원 글삭제,수정

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결