728x90 분류 전체보기44 Document Retrieval Evaluation Metrics - 2 2024.11.22 - [오블완 챌린지] - Document Retrieval Evaluation Metrics - 1 Document Retrieval Evaluation Metrics - 1RAG에서 중요한 요소는 크게 2가지이다.첫번째로 사용자가 입력한 쿼리와 관련된 문서를 찾는 것,두번째로는 검색된 문서 (chunks)를 기반으로 얼마나 질문에 대한 답변을 잘 하는지.여기서 첫번째carrotomato.tistory.com 오늘은 어제 작성했던 Document Retrieval 에서의 평가 metric 2번째 포스트.저번 포스트에서는 Confusion Matrix를 기반으로 하는 기본적인 IR evaluation metrics을 알아봤다.오늘은 추가적으로 많이 사용하는 metrics인 Mean Av.. 2024. 11. 23. Document Retrieval Evaluation Metrics - 1 RAG에서 중요한 요소는 크게 2가지이다.첫번째로 사용자가 입력한 쿼리와 관련된 문서를 찾는 것,두번째로는 검색된 문서 (chunks)를 기반으로 얼마나 질문에 대한 답변을 잘 하는지.여기서 첫번째 요소인 Information Retrieval 에 대해 평가는 어떻게 해야할까?이건 정보 검색을 하는데 주로 사용되는 임베딩 모델의 평가와도 관련이 있다.우선 정보검색은 추천시스템과 아주 유사한 task라고도 볼 수 있다.사용자가 원하는 정보를 k개 검색해서 사용자한테 추천해주는 system인데기준을 쿼리와 저장된 chunks 사이의 임베딩 유사도라고 표현하면 이해가 좀 쉬우려나..?그래서 간단한 평가 metrics은 무엇이 있느냐.. 하면!우선은 confusion matrix를 기반으로 하는 평가 방법이 있.. 2024. 11. 22. TopicGPT 사용하기 올해 4월쯤 Topic Modeling 연구를 조금 했었거든요.BERTopic을 대체할게 뭐 없을까 하다가 LLM을 활용해서 Topic Modeling을 하는 논문을 발견했었어요.당시에는 간단한 아이디어인데 나쁘지않네 정도로만 생각했는데,글쎄 NAACL 2024에 등재되었네요..! https://arxiv.org/abs/2311.01449 TopicGPT: A Prompt-based Topic Modeling FrameworkTopic modeling is a well-established technique for exploring text corpora. Conventional topic models (e.g., LDA) represent topics as bags of words that often .. 2024. 11. 21. 2024.11.20 백현동 PIETRA https://naver.me/FuEXeBSg 삐에뜨라 : 네이버 방문자리뷰 125 · 블로그리뷰 138m.place.naver.com 오늘 저녁은 당근이와 백현동 카페거리에 있는 파스타집인 PIETRA에 다녀왔다.저번에 백현동 카페거리에 있는 인도음식점을 갔는데 사실 인도음식점 가기 전에 가보려고 했던 곳이다.그 때가 월요일 점심이었는데 사람이 많아서 웨이팅이 꽤 길어서 못갔는데 이번에는 성공!다행히 우리 말고는 사람이 없었다. 사실 저번부터 우리가 보통 알고 있는 크림들어간 까르보나라가 아닌 계란 노른자로 만드는 이탈리아 정통 까르보나라를 먹고 싶어서 여기저기 찾아봤었는데, 드디어 먹어봤다!!우리가 주문한 메뉴는 Amatriciana (아마트리치아나), 그리고 Strozzapreti al carbon.. 2024. 11. 20. 상하목장 오가닉 그릭요거트 리뷰 IT블로그 맞습니다.전 일하러 온 사람 맞습니다. 오늘은 최근에 빠져든 요거트 리뷰를 해볼게요. 전 집에서 유청을 빼다가 그릭 요거트를 만들어 먹을 정도로 요친자입니다.그래서 궁금한 제품이 나오면 꼭 사먹어 보거든요. 원래는 꾸덕한 요거트 식감을 너무 좋아해서 그릭데이나 룩트를 사먹거나너무 비싸다 싶으면 집에서 만들어먹었는데,요즘 아침 대용으로는 그냥 쭉쭉 빨아먹을 수 있는 요거트가 땡기더라고요. 바로 요제품입니다.맛은 사과&케일 / 블루베리&케일 이렇게 2가지 종류가 있는 것 같은데아직 사과&케일 밖에 못 먹어봤어요.칼로리도 100kcal 밖에 안해요!요거트치고는 정말 적은 편이라고 생각합니다. 근데 양에 비해서 가격이 조금.. 조금 많이 비싸긴합니다.마트나 인터넷이나 개당 약 3,000원 정도 생각하.. 2024. 11. 19. 2024.11.12~2024.11.14 EMNLP 학회 후기 오늘은 고생고생을 하며 다녀온 2024 EMNLP 학회 썰을 아주 짧게 풀어보려고 합니다.사실 EMNLP가 아니었다면 Virtual로 참석했을 것 같아요.이 놈의 궁금증때문에 체류기간보다 비행기에 더 오래 있었다고 생각하면...! (사실 체류기간이 그래도 더 길긴 합니다ㅎ) EMNLP는 NLP를 공부하시는 분들이라면 모두 아시겠지만 자연어처리 분야에서는 정말 손에 꼽는 좋은 학회라고 개인적으로 생각합니다.저도 여기서 나오는 논문들을 참 많이 읽 아니 읽으려고 노력 중이에요. https://2024.emnlp.org/ GitHub - FreedomIntelligence/FreedomIntelligence.github.io: Website for CUHKSZ NLP group (under constructi.. 2024. 11. 18. 이전 1 2 3 4 5 ··· 8 다음 728x90
