디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

에이도비야 자꾸 그리고 레디스를 언급하는게 걍 스코프가 다른거임

ㅆㅇㅆ(124.216) 2025.10.29 05:21:22
조회 161 추천 0 댓글 20

아까부터 레디스를 계에에에속 언급하는거보면


'다중 사용자' 이걸로 관점을 보는데 애초에 내 코드는 개인 사용자용임


근데 뭐가 틀리고 다른지 제대로 설명해줌


1. 벡터 DB를 인스턴스로 올리고 땡처리하는가?
->FastAPI의 lifeSpan 이벤트 핸들러를 이용해서 인스턴스 한번 생성후, 참조가 필요한곳에 필요할때마다 주입하는거임


2. 코어당 여러개 연결 있고 get해서 써야한다

->RDBMS의 커넥션 풀링인데, ChromaDB는 로컬 파일 기반 벡터 DB 클라이언트라서, 병렬 읽기 쓰레드 세이브 자동 보정임.(쓰기는 보장 안됨, 그래서 순차 쓰기 )


3.Rag 기다리는 동안 사용감이 떨어지니까 Redis 같은걸로 관리

-> RAG 결과를 캐싱하는데 Redis 쓰라고하는데, RAG 작업을 백그라운드 큐로 돌려서하는거면 모를까, 이건 단일 사용자용으로는 과도함

그냥 FastAPI기반 asyncio 정도로 충분히 비동기 처리가 가능함. 애초에 레디스 쓴다는건 대규모 스택임


4. 벡터 연결에도 스코프가 있어야한다. 그런게 없다

-> 애플리케이션 스코프가 있음. lifespan으로 관리되는 store_instance가 바로 그거임. 요청 스코프가 아니라, 애플리케이션 스코프임


5. 100개 작업 처리해달라고 하면 지금 코드로는 어떻게 하느냐?

-> 100개의 RAG는 ProcessPoolExecutor로 가능함. 자기 컨텍스트에서 새롭게 여는거고


각 병렬 작업의 DI로 동일한 store_instance 참조 받음


쓰기 작업은 지금은 필요없어서 안했고, 추후에 대화 기록을 벡터 임베딩해야하면 애초에 이걸 리듀서로 추후에 구현하면됨.


자꾸 네가 말하는 스코프는 '대규모 사용자 기반 웹 서비스'


이거고 내가 말하는건 그냥 '단일 사용자 기반 멀티 에이전트' 이 차이임.


자꾸 레디스가 나오고 이러는게 이해가 안가는게 그거고 나는 저거 서버에 올릴 생각 없어.


저건 그냥 여러 LLM API를 조합해서 하나의 골을 주면 에이전트가 조합하는거지 서버에 올리는게 아님 QT6만 봐도 답 나오잖냐


추천 비추천

0

고정닉 0

0

댓글 영역

전체 댓글 0
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 해외에서 겪는 불합리한 대우에 대응 잘 할 것 같은 스타는? 운영자 25/11/03 - -
AD 저녁 뭐먹지? 오늘의 메뉴 추천! 운영자 25/10/31 - -
2901054 강인공지능(AGI)의 구체적인 세부 알고리즘, 특허낼까? 나르시갤로그로 이동합니다. 16:03 22 0
2901053 연세대학원 RAG 강의자료와서 보는데 교수 진짜 빡통대가리네 [2] ㅆㅇㅆ(124.216) 15:45 57 0
2901052 강인공지능 AGI 핵심 알고리즘을 2000년대 초반에 완성을 했지 ㅋㅋ [1] 나르시갤로그로 이동합니다. 15:34 30 0
2901051 🌑 키보드 배틀 사이트를 개발할 사람을 구합니다 🌑 [11] 프갤러(125.248) 15:31 66 0
2901050 강인공지능(AGI) 도달을 위한 자가 수정 알고리즘 [1] 나르시갤로그로 이동합니다. 15:21 28 0
2901049 에헴, LLM을 초월한 AGI 자가 수정 알고리즘 [2] 나르시갤로그로 이동합니다. 14:56 43 0
2901048 ik 포기할란다 와 씨발 [7] 루도그담당(58.239) 14:43 70 0
2901047 코드 읽는 방법 배울만한 강의나 책 추천 부탁드립니다 [2] 프갤러(220.67) 14:43 29 0
2901046 난 이번에 안전성, 신뢰성 관련 두가지 발명을 하였다. 나르시갤로그로 이동합니다. 14:40 33 0
2901045 부트캠프한테 고마워서 노래 만들어봄 [1] 프갤러(116.32) 14:15 35 1
2901044 vello 사례) 러스트로 만들어도 안전하지 않습니다. 나르시갤로그로 이동합니다. 14:10 21 0
2901043 현대 중국의 뿌리 chironpractor갤로그로 이동합니다. 14:08 19 0
2901042 아 배불러 [6] 배구공(119.202) 13:54 51 0
2901040 여친의 판도라상자를 열었는데 미치겠어요 [4] ㅇㅇ(125.190) 13:53 64 0
2901038 3.3퍼만 떼고 일 시키는 곳이랑 먹고 살 수가 없지 [15] 에이도비갤로그로 이동합니다. 13:01 77 0
2901036 아동성애 [1] 류류(121.140) 12:41 36 0
2901033 쿠팡 노조는 새벽배송 원하는거 같은데 [5] chironpractor갤로그로 이동합니다. 12:17 53 1
2901032 일본 다카이치 총리 지지율 82% 고공행진의 이유 [3] ♥KiTTY냥덩♥갤로그로 이동합니다. 11:55 53 0
2901031 대부분의 러빨럼의 실체 [4] 나르시갤로그로 이동합니다. 11:45 39 0
2901029 [소프트웨어] Rx KMeans AL 프갤러(121.172) 11:23 29 0
2901028 韓 AI, 유럽 주요 모델에 앞서....中 딥시크 바짝 추격 [1] ㅇㅇ(118.235) 11:18 60 1
2901027 [소프트웨어] Rx Long Shadow 2D 프갤러(121.172) 10:59 24 0
2901026 그래말리 갈수록 성가시네 [2] chironpractor갤로그로 이동합니다. 10:48 45 0
2901022 중국발 먼지 또 시작되는듯 ♥KiTTY냥덩♥갤로그로 이동합니다. 09:32 52 0
2901020 단풍도 이쁘지만 이것도 이뻐..ㅇㅅㅇ [3] 헤르 미온느갤로그로 이동합니다. 08:50 61 0
2901019 태연 ㅇㅅㅇ 헤르 미온느갤로그로 이동합니다. 08:48 20 0
2901018 하루 한 번 헤르미온느 찬양 [1] 헤르 미온느갤로그로 이동합니다. 08:47 56 0
2901017 html알바했던 썰 [12] 슈퍼막코더(126.194) 08:41 99 2
2901016 타로사이트를 몇달간 쳐만들고 버그도 있으면 폐급이잖아 [1] ㅇㅇ(118.235) 08:19 71 5
2901015 언어는 도구다. 틀린 말은 아니야 [1] 프갤러(223.33) 07:58 57 2
2901014 러스트 안해본 사람은 향상심을 거세당한거임 [1] 프갤러(211.234) 07:39 47 0
2901013 10년 내에 싹 다 러스트로 교체됨 프갤러(218.153) 07:31 38 0
2901012 나는조현병이야 나는내향적이야 [1] 손발이시립디다갤로그로 이동합니다. 05:49 74 0
2901009 요새 메이크 닷컴<<이거 시나리오 의뢰 존나 들어오노 [1] ㅆㅇㅆ(124.216) 04:45 60 0
2901008 vsc 컴파일 관련 문제 질문 LeNa갤로그로 이동합니다. 04:31 30 0
2901007 파이널 IK 크랙 받아가지고 쓰는중인데 루도그담당(58.239) 03:31 36 0
2900994 직업수명의미없다 빌게이츠가10년내 싹대체된다함 프갤러(175.197) 02:33 36 0
2900992 비트는 100k 몇번 더 왔다갔다 할거같은데 [2] 따당갤로그로 이동합니다. 02:03 64 0
2900991 ㅆㅇㅆ저새끼 개웃긴게 ㅇㅇ(218.149) 01:22 90 7
2900990 음기 충전 발명도둑잡기(118.216) 01:11 82 0
2900989 고니시 유키나가가 문경과 새재에서 히데요시에게 보낸 편지 [1] 책사풍후갤로그로 이동합니다. 00:10 40 0
2900988 와 나 대구에서 임금 체불 300만 떼먹힌걸로 피눈물 흘렸었는데 ㅆㅇㅆ(124.216) 11.06 209 9
2900986 [애니뉴스] 미소녀 시뮬레이션 게임에 대한 고찰 프갤러(121.172) 11.06 41 0
2900985 나님 프갤 뛰뛰크루 만들어볼깡? [2] ♥KiTTY냥덩♥갤로그로 이동합니다. 11.06 63 0
2900984 [애니뉴스] 코노스바 게임 관련 자료 + 이미지 + 카제나 짧은 평 프갤러(121.172) 11.06 35 0
2900982 아무래도 전 회사 다니면서 해마와 뇌량 수축이 생긴거 같아 [2] chironpractor갤로그로 이동합니다. 11.06 63 0
2900981 모기 때문에 자는거 존나 밀렷네 ㅅㅂ [2] ♥KiTTY냥덩♥갤로그로 이동합니다. 11.06 86 0
2900980 나님 겨우 모기 때문에 쫓겨낫오.. 너무 처량행.. ♥KiTTY냥덩♥갤로그로 이동합니다. 11.06 69 0
2900979 모기한테 쫓겨서 피난 나왓당.. [2] ♥KiTTY냥덩♥갤로그로 이동합니다. 11.06 85 0
2900978 요즘 존나 문란해서 aws 툴 키디들이 나 인프라 전문가입네 이지랄 [1] 프갤러(211.234) 11.06 68 0
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

디시미디어

디시이슈

1/2