반응형

LLM 7

Nanonets-OCR-s 사용 한국어 pdf OCR 해보기

https://huggingface.co/nanonets/Nanonets-OCR-s nanonets/Nanonets-OCR-s · Hugging FaceNanonets-OCR-s is a powerful, state-of-the-art image-to-markdown OCR model that goes far beyond traditional text extraction. It transforms documents into structured markdown with intelligent content recognition and semantic tagging, making it ideal for dowhuggingface.co 문서를 구조화된 마크다운으로 변환하는 qwen2.5vl:3b 모델 기반 na..

AI/LLM 2025.06.18

Unstructured PDF (multi-modal-rag) 사용 해보기

https://github.com/NarimanN2/ollama-playground/tree/main/multi-modal-rag ollama-playground/multi-modal-rag at main · NarimanN2/ollama-playgroundInteresting LLM projects that I created for my YouTube channel using Ollama's open-source models. - NarimanN2/ollama-playgroundgithub.com 한국어 table, charts를 갖고 있는 multi-modal-rag 빌딩과 테스트를 진행해 봤습니다. Pdf 문서를 블록 단위로 인식하는 unstructured 모델 사용. 바로 코드 보면서 설명하겠습..

AI/LLM 2025.04.30

Cogito-70B llm 모델 성능 테스트 해보기

https://ollama.com/library/cogito cogitoCogito v1 Preview is a family of hybrid reasoning models by Deep Cogito that outperform the best available open models of the same size, including counterparts from LLaMA, DeepSeek, and Qwen across most standard benchmarks.ollama.com DEEP COGITO에서 cogito라는 하이브리드 추론 모델을 냈습니다.  70B 모델은 Llama4 Scout 모델보다 성능이 좋다 합니다.     Ollama에 있어서 사용이 매우 간편합니다. 사용 GPU: H100 ..

AI/LLM 2025.04.11

QWQ vs Llama3.3 Ollama 기반 Agentic RAG 해보기

Agentic RAG를 두 가지의 llm으로 테스트해 봤습니다. 추론 오픈 모델 중 성능 높다고 알려진 QWQ-32B와 비추론 모델인 Llama3.3-70B입니다.  이미 Llama4도 나오긴 했으나, H100 한대로는 아직 어려워서 해보진 않았습니다. Ollama에 양자화 모델(말로는 60GB 정도 사용) 뜨면 해보겠습니다. 원래 QWQ전에 여러 모델들 테스트해 봤는데, 지금까진 Llama3.3-70B가 한국어에 무난해서 사용하고 있었습니다. QWQ-32B를 로컬에서 실행하려면 최소 24GB VRAM이 필요합니다. 저는 H100 80GB 사용했습니다.  우선 Ollama를 사용했기에 아래 명령으로 Ollama, QWQ 설치해 줍니다.curl -fsSL https://ollama.com/install.s..

AI/LLM 2025.04.09

Qwen2.5-VL-32B 모델로 image to text(이미지로 텍스트 생성) 해보기(Gemma3 비교)

https://huggingface.co/Qwen/Qwen2.5-VL-32B-Instruct  Qwen/Qwen2.5-VL-32B-Instruct · Hugging FaceQwen2.5-VL-32B-Instruct Latest Updates: In addition to the original formula, we have further enhanced Qwen2.5-VL-32B's mathematical and problem-solving abilities through reinforcement learning. This has also significantly improved the model's subjective ushuggingface.co 전 글의 Qwen2.5-VL-32B 모델로 OCR 해보기..

AI/LLM 2025.04.03

Qwen2.5-VL-32B 모델로 OCR, 질문 답 해보기(LLM OCR)

https://huggingface.co/Qwen/Qwen2.5-VL-32B-Instruct Qwen/Qwen2.5-VL-32B-Instruct · Hugging FaceQwen2.5-VL-32B-Instruct Latest Updates: In addition to the original formula, we have further enhanced Qwen2.5-VL-32B's mathematical and problem-solving abilities through reinforcement learning. This has also significantly improved the model's subjective ushuggingface.co  Qwen2.5-VL 나온 초창기에 7B 모델로 OCR 테..

AI/LLM 2025.04.02

Gemma3로 image to text(이미지로 텍스트 생성) 해보기

https://huggingface.co/google/gemma-3-27b-it google/gemma-3-27b-it · Hugging FaceThis repository is publicly accessible, but you have to accept the conditions to access its files and content. To access Gemma on Hugging Face, you’re required to review and agree to Google’s usage license. To do this, please ensure you’re logged inhuggingface.co 생성형 AI 모델로 질문 답변, 생성 작업에 괜찮은 모델이 3월에 출시했었는데 이것저것 돌려보다..

AI/LLM 2025.04.02
반응형