본문 바로가기

전체 글

(172)
MVSplat 읽어보기 MVSplat: Efficient 3D Gaussian Splatting from Sparse Multi-View Images ECCV 2024 (European Conference on Computer Vision 2024) https://arxiv.org/pdf/2403.14627 Abstract 우리는 MVSplat을 제안한다. MVSplat은 적은 수의 멀티뷰 이미지를 입력으로 받고, 깨끗한 feed forward 3D gaussians를 생성하는 효율적인 기법이다. 정확하게 가우시안의 중심 위치를 알아내기 위해, 우리는 평면 스위핑을 통한 cost volume 표현방식을 개발했는데 이 때, 크로스 뷰 피처의 유사도가 cost volume내에 저장되어서 깊이를 추정하기 위한 가치있는 지오메트리..
Sugar 읽어보기 (2023) https://arxiv.org/pdf/2311.12775 오랜만에 올리는 논문 읽어보기 SuGaR: Surface-Aligned Gaussian Splatting for Efficient 3D Mesh Reconstruction and High-Quality Mesh Rendering Abstract 우리는 3DGS로부터 정확하고 매우 빠른 메시 추출을 가능하게 하는 방법을 제안한다. 가우시안 스플래팅은 최근 매우 유명해졌는데, 그 배경에는 널프보다 트레이닝 속도바 매우 빠르면서도 사실적인 결과를 내는데에 있다. 그러나, 여전히 수백만의 작은 가우시안들로부터메시를 뽑아내는것은 매우 도전적이다. 왜냐면 가우시안들이 정렬되어있지 않기 때문인데, 아직 정렬을 다룬 방법은 나오지 않았다. 우리의 첫번째 기여..
Playwright 설치해보기 lmstudio에 mcp로 붙일 playwright가 필요해졌다. 그래서 한번 설치해봤다. 결과적으로는 npm init playwright@latest 한번 해주면 세팅이 거의 끝났다. lmstudio 링크하는것도 매우 간편하게 끝... 아래는 실패기.. 굳이 git clone 할 필요도 없더라. https://github.com/microsoft/playwright GitHub - microsoft/playwright: Playwright is a framework for Web Testing and Automation. It allows testing Chromium, Firefox andPlaywright is a framework for Web Testing and Automation. I..
lmstudio mcp 설치해보기 duckduckgo visit_website lmstudio로 llm 모델을 써보고잇는데,. llm 자체의 성능은 참 좋은데, 외부 웹사이트 확인이 안된다. 보다보니 mcp를 추가하면 해결이 될 것 같았다. GPT에게 문의하니, 위 두가지를 넣어보라고 한다. https://lmstudio.ai/danielsig/duckduckgo?utm_source=chatgpt.com danielsig/duckduckgoAn LM Studio plugin that provides access to DuckDuckGo web search and image search.lmstudio.ai여기로 가본다. 우상단에 run in lm studio를 눌러본다. 그럼 이런 창이 뜬다. 설치 완료 시 이렇게 된다. 다시 말 걸어보면 이런 내용이 나오고..https://lm..
lmstudio로 llm api 기능 실행해보기 by lmlink 전에는 로컬에서 바로 서버를 켤 수 있었던거 같은데, 이녀석 업데이트 한다는 핑계로 lmlink라는 기능을 넣으면서 해당 기능은 막힌 것 같다. 바로 실행해보려 하니 계정을 만들라고 해서 만들어봤다. 근데 뭔가 만드는데 시간이 걸리네.... 5분정도 기다리고 나니 이렇게 메일이 날아왔다. 뒤에 내용을 보니, 연결할 머신에도 lmstudio를 설치 하란다. 리눅스 머신에 설치를 완료해주었고, 다른 계정을 하나 파서 로그인 해주었다. 확인해보니 둘이 같은 계정을 써야 바로 찾을 수 있다고 한다. 그 뒤로는 뭐 별거 없네... 자동으로 찾아낸 이후에는 api 형태로도 콜 할 수 있게 되었다.
NEMOTRON 3 SUPER with 5090 and lmstudio 네모트론 3 슈퍼를 5090 gpu 한장만 가지고 돌려본 후기. lmstudio를 통해서 진행해봤는데 다운로드 문제 없었고, 모델을 올리고 나서 인사말을 건내봤는데, 30초 정도가 걸리더라. 이후에 너 좀 느리네? 라고 말했더니 위 답변을 하는데 1분이 추가로 더 걸렸다... 한장만 가지고는 절대 사용 못할 것 같다...
PGSR: Planar-based Gaussian Splatting for Efficient and High-Fidelity Surface Reconstruction 돌려보기 오늘은..https://github.com/zju3dv/PGSR GitHub - zju3dv/PGSR: [TVCG2024] PGSR: Planar-based Gaussian Splatting for Efficient and High-Fidelity Surface Reconstruction[TVCG2024] PGSR: Planar-based Gaussian Splatting for Efficient and High-Fidelity Surface Reconstruction - zju3dv/PGSRgithub.com이걸 돌려본다. 설치 과정은 기존에 3dgs, instant-ngp를 해왔다면 크게 어려움은 없을 것인데, pytorch3d 설치가 조금 까다로웠다 결국 그냥 git으로 코드 받고, cub 를 ..
instant-NGP 돌려보기 일단 instant-NGP를 빌드해놓은 프로그램을 받아서 돌리는건 해봤다. 그런데 나는 내가 가진 이미지에 이걸 적용해보고 싶다. 그러려면 colmap 프로세스를 돌린 후에, 이걸 nerf 형태로 변환을 시켜줘야 한다. 이걸 지원하는 스크립트가 제공되는데 바로 colmap2nerf.py 파일이 있는데, 이걸 바로쓰지는 못하고 폴더 구조를 맞춰 줘야 한다. python scripts/colmap2nerf.py --colmap_db archer/distorted/database.db --images archer/images --text archer/sparse/0/txt --out archer/transforms.json 그 과정에서 text 는 camera.bin 같은 데이터를 요구하는데, 이건 col..