Unsloth Browser Use로 로컬 모델에게 브라우저를 맡기기

Browser Use는 채팅 옆에 브라우저 창을 하나 열고, 모델이 그 안에서 페이지를 넘기고 버튼을 누르게 해요. 도구 호출을 지원하는 모델이면 로컬에서도 돌아가요.

비전을 지원하는 모델은 스크린샷까지 봐요. 페이지 글자에 없는 이미지나 차트는 비전이 없으면 읽지 못해요.

클라우드 모델을 붙일 수도 있지만, 로컬 모델을 쓰는 이유는 페이지 내용이 밖으로 나가지 않는다는 점이에요.

Browser Use는 모델을 고정하지 않아요. 도구 호출을 지원하고 기기 메모리에 들어가는 모델이면 되는데, 실제로는 호출을 안정적으로 만드는 쪽이 이겨요.

문서 예시는 Qwen3.8 27B를 쓰지만, 메모리가 8GB인 기기라면 2B나 4B급 도구 호출 모델로 시작해요. 화면의 이미지를 읽어야 하면 비전을 지원하는 모델을 골라요.

양자화²는 4비트면 충분해요. 브라우저 작업은 긴 문맥보다 짧은 호출을 여러 번 하는 일이라, 문맥을 크게 잡기보다 응답이 빠른 파일이 나아요.

페이지 읽기와 링크 이동, 라벨이 있는 버튼 클릭, 폼 입력은 텍스트 모델도 해요. 이미지와 차트는 비전이 있어야 해요.

비밀번호와 결제 정보는 모델이 채우지 못해요. 업로드도 막혀 있어서, 민감한 입력은 사람이 직접 해요.

맥은 brew, 윈도는 winget으로 데스크톱 앱을 깔아요. 리눅스와 WSL은 설치 스크립트를 써요.

brew install --cask unsloth
winget install id UnslothAI.Unsloth
curl -fsSL https://unsloth.ai/install.sh | sh

모델 허브에서 도구 호출을 지원하는 모델을 고르고, 기기에 맞는 양자화를 받아요. 그다음 채팅 입력 옆 메뉴에서 Browser use를 켜면 돼요.

설정의 Browser 항목에서 사이트별 권한을 정해요. 처음에는 기본값을 좁게 두고, 자주 쓰는 사이트만 예외로 열어요.

전체 접근은 승인 창을 여러 개 건너뛰어요. 차단한 사이트와 다운로드는 그대로 막히고 스크립트도 여전히 승인을 받지만, 확인 단계가 줄어드는 만큼 필요한 작업에만 켜세요.

모델이 자기 탭에서만 움직여요. 크롬이나 사파리에서 열어 둔 탭은 조작하지 못하니, 주소를 채팅에 붙여 다시 열게 해요.

localhost, 사설망 주소, file:// 주소는 탐색 대상이 아니에요. 공개된 HTTP와 HTTPS 페이지만 열려요.

도구 호출이 흔들리는 모델은 중간에 멈춰요. 페이지 구조가 복잡할수록 한 번에 여러 동작을 시키지 않는 게 나아요.

캡차와 임베디드 위젯, 캔버스 조작은 실패하기 쉬워요. 결제와 로그인을 자동화하려는 용도로는 쓰지 마세요.

앱 안의 기능이라 화면 구성이 바뀌면 절차도 달라져요. 브라우저 자동화를 서버에서 돌리려면 Playwright 같은 도구가 따로 필요해서, 이 앱을 서버용으로 권장하지 않아요.

모델이 페이지를 요약해 주는 것과 실제로 조작하는 것은 달라요. 요약만 필요하면 브라우저를 넘기지 않고 주소를 복사해 붙이는 편이 빨라요.

앱은 무료지만 모델 라이선스는 따로예요. 모델 카드에서 상업적 사용 조건을 확인해야 해요.