Project
-
https://github.com/khw11044/Detecting-Anomalies-in-Wafer-Manufacturing GitHub - khw11044/Detecting-Anomalies-in-Wafer-ManufacturingContribute to khw11044/Detecting-Anomalies-in-Wafer-Manufacturing development by creating an account on GitHub.github.com 목적: 웨이퍼 제조 과정에서 발생하는 불량을 탐지하는 프로젝트를 수행한다. 요약: 웨이퍼 제조 과정에서 측정된 다양한 기계 데이터를 수집하고 이에 따라 양품과 불량품, 2개의 클래스 0과 1로 구분된 데이터가 제공된다. 양품이 불량품 데이터보다 더 많은 불균..
[캐글] Detecting Anomalies in Wafer Manufacturinghttps://github.com/khw11044/Detecting-Anomalies-in-Wafer-Manufacturing GitHub - khw11044/Detecting-Anomalies-in-Wafer-ManufacturingContribute to khw11044/Detecting-Anomalies-in-Wafer-Manufacturing development by creating an account on GitHub.github.com 목적: 웨이퍼 제조 과정에서 발생하는 불량을 탐지하는 프로젝트를 수행한다. 요약: 웨이퍼 제조 과정에서 측정된 다양한 기계 데이터를 수집하고 이에 따라 양품과 불량품, 2개의 클래스 0과 1로 구분된 데이터가 제공된다. 양품이 불량품 데이터보다 더 많은 불균..
2024.08.17 -
해당 논문을 간단하게 보고 해당 논문과 데이터를 바탕으로 제공된 캐글 데이터를 분석해본다. https://www.kaggle.com/datasets/qingyi/wm811k-wafer-map/data WM-811K wafer map www.kaggle.com 논문 : Wafer Map Failure Pattern Recognition and Similarity Ranking for Large-Scale Data Sets https://ieeexplore.ieee.org/document/6932449 Wafer Map Failure Pattern Recognition and Similarity Ranking for Large-Scale Data SetsWafer maps can exhibit spec..
Wafer Map Failure Pattern Recognition해당 논문을 간단하게 보고 해당 논문과 데이터를 바탕으로 제공된 캐글 데이터를 분석해본다. https://www.kaggle.com/datasets/qingyi/wm811k-wafer-map/data WM-811K wafer map www.kaggle.com 논문 : Wafer Map Failure Pattern Recognition and Similarity Ranking for Large-Scale Data Sets https://ieeexplore.ieee.org/document/6932449 Wafer Map Failure Pattern Recognition and Similarity Ranking for Large-Scale Data SetsWafer maps can exhibit spec..
2024.08.17 -
https://dacon.io/competitions/official/236295/overview/description 재정정보 AI 검색 알고리즘 경진대회 - DACON분석시각화 대회 코드 공유 게시물은 내용 확인 후 좋아요(투표) 가능합니다.dacon.io 지난번 KT AIVLE SCHOOL 빅프로젝트를 통해 KoTRA에 참가하여 우수상을 받았고 이를 기점으로 RAG를 더 공부하고 프로젝트를 더 도전해보기로 하였다. 마침 데이콘에 좋은 대회가 열려서 참가한다. 일단 대회에 대해서 간단하게 설명하자면 목적 :- 질의 응답 AI 알고리즘 개발- 방대한 양의 재정 데이터가 일반 국민과 전문가 모두에게 쉽게 접근 가능하도록 만드는 것이 목적 즉 RAG를 통해 방대한 양의 재정 데이터에 접근하고 LLM이 ..
[RAG 프로젝트][데이콘] 재정정보 AI 검색 알고리즘 경진대회 1https://dacon.io/competitions/official/236295/overview/description 재정정보 AI 검색 알고리즘 경진대회 - DACON분석시각화 대회 코드 공유 게시물은 내용 확인 후 좋아요(투표) 가능합니다.dacon.io 지난번 KT AIVLE SCHOOL 빅프로젝트를 통해 KoTRA에 참가하여 우수상을 받았고 이를 기점으로 RAG를 더 공부하고 프로젝트를 더 도전해보기로 하였다. 마침 데이콘에 좋은 대회가 열려서 참가한다. 일단 대회에 대해서 간단하게 설명하자면 목적 :- 질의 응답 AI 알고리즘 개발- 방대한 양의 재정 데이터가 일반 국민과 전문가 모두에게 쉽게 접근 가능하도록 만드는 것이 목적 즉 RAG를 통해 방대한 양의 재정 데이터에 접근하고 LLM이 ..
2024.08.15 -
요약- Redis는 비정형 데이터를 저장하고 관리하기 위한 오픈 소스 기반의 비관계형 데이터 베이스 관리 시스템 (DBMS) - 인메모리 데이터 구조를 가진 저장소- 데이터베이스, 캐시, 메세지 브로커로 사용- 사용자가 늘어나면 데이터 베이스가 과부하될수있기 때문에, 캐시 서버를 도입하는데, 이 캐시 서버로 사용할수 있는것이 Redis - Redis(캐시서버)를 통해, 한번 읽어온 데이터를 임의의 공간에 저장하여, 다음에 읽을 때는 빠르게 결괏값을 받을 수 있도록 도와주는 공간입니다.- 같은 요청이 여러 번 들어오는 경우 매번 데이터 베이스를 거치는 것이 아니라, 캐시 서버에서 첫 번째 요청 이후 저장된 결괏값을 바로 내려주기 때문에, DB의 부하를 줄이고 서비스의 속도도 느려지지 않는 장점이 있음 ..
Redis요약- Redis는 비정형 데이터를 저장하고 관리하기 위한 오픈 소스 기반의 비관계형 데이터 베이스 관리 시스템 (DBMS) - 인메모리 데이터 구조를 가진 저장소- 데이터베이스, 캐시, 메세지 브로커로 사용- 사용자가 늘어나면 데이터 베이스가 과부하될수있기 때문에, 캐시 서버를 도입하는데, 이 캐시 서버로 사용할수 있는것이 Redis - Redis(캐시서버)를 통해, 한번 읽어온 데이터를 임의의 공간에 저장하여, 다음에 읽을 때는 빠르게 결괏값을 받을 수 있도록 도와주는 공간입니다.- 같은 요청이 여러 번 들어오는 경우 매번 데이터 베이스를 거치는 것이 아니라, 캐시 서버에서 첫 번째 요청 이후 저장된 결괏값을 바로 내려주기 때문에, DB의 부하를 줄이고 서비스의 속도도 느려지지 않는 장점이 있음 ..
2024.08.11 -
1. Ollema 설치하기https://ollama.com/ OllamaGet up and running with large language models.ollama.com 설치가 끝나면 사용가능한 Models가 무엇이 있는지 확인해 보자 노트북에서도 잘 돌아갈 수 있게 qwen2를 사용해보자. 클릭1.5 b를 선택하고 복사 그냥 터미널 열고 복사한 명령어 치면 모델을 다운받고모델과 대화할 수 있음 2. Open WebUI를 사용하여 localhost에서 사용하기 2.1. Docker 다운로드먼저 Docker를 다운받자 https://www.docker.com/products/docker-desktop/ Docker Desktop: The #1 Containerization Tool for Dev..
Ollema 이용해서 자기 노트북에 LLM 모델 사용하기1. Ollema 설치하기https://ollama.com/ OllamaGet up and running with large language models.ollama.com 설치가 끝나면 사용가능한 Models가 무엇이 있는지 확인해 보자 노트북에서도 잘 돌아갈 수 있게 qwen2를 사용해보자. 클릭1.5 b를 선택하고 복사 그냥 터미널 열고 복사한 명령어 치면 모델을 다운받고모델과 대화할 수 있음 2. Open WebUI를 사용하여 localhost에서 사용하기 2.1. Docker 다운로드먼저 Docker를 다운받자 https://www.docker.com/products/docker-desktop/ Docker Desktop: The #1 Containerization Tool for Dev..
2024.08.08 -
https://github.com/khw11044/my_RAGAS GitHub - khw11044/my_RAGASContribute to khw11044/my_RAGAS development by creating an account on GitHub.github.com 우선 해당 레파지토리 코드를 기반으로 설명하는 게시물임을 알린다. 그리고 해당 코드는 아래 링크를 기반으로 커스텀하였다. https://www.youtube.com/watch?v=jSd6pdydBNU&t=1257s https://www.youtube.com/watch?v=rA5SoBXB8R4 평가를 위한 과정 요약 1. 문서에서 text split를 통해 'contents 생성'과 'metadata(문서 소스)' 저장 AutoRAG..
LoGO 해외로고 프로젝트 - RAG 5: RAGAS로 성능 평가하기https://github.com/khw11044/my_RAGAS GitHub - khw11044/my_RAGASContribute to khw11044/my_RAGAS development by creating an account on GitHub.github.com 우선 해당 레파지토리 코드를 기반으로 설명하는 게시물임을 알린다. 그리고 해당 코드는 아래 링크를 기반으로 커스텀하였다. https://www.youtube.com/watch?v=jSd6pdydBNU&t=1257s https://www.youtube.com/watch?v=rA5SoBXB8R4 평가를 위한 과정 요약 1. 문서에서 text split를 통해 'contents 생성'과 'metadata(문서 소스)' 저장 AutoRAG..
2024.08.06