웹 자동화 기술의 발전과 브라우저 작업 방식

컴퓨터가 사람 대신 마우스를 움직이고 버튼을 눌러준다면 어떨까? 이런 걸 '웹 자동화'라고 부르는데, 생각보다 역사가 오래됐고 최근 들어 완전히 새로운 국면을 맞고 있다.

시작은 2004년 셀레니움이라는 도구였다. 개발자들이 웹사이트가 제대로 작동하는지 매번 손으로 클릭해서 확인하는 대신, 코드로 "이 버튼을 클릭하고, 이 칸에 글자를 입력해봐"라고 시키는 방식이었다. 문제는 이 방식이 사이트 디자인 하나만 바뀌어도 쉽게 고장 났다는 점이다. 버튼의 이름표나 위치가 조금만 달라져도 자동화 코드가 그 버튼을 못 찾고 멈춰버렸다.

2017년 구글이 퍼펫티어라는 도구를 내놓으면서 훨씬 빠르고 정확한 자동화가 가능해졌고, 2020년엔 마이크로소프트의 플레이라이트가 등장해 크롬뿐 아니라 여러 브라우저를 한꺼번에 다룰 수 있게 됐다. 지금도 회사들이 웹사이트 오류를 자동으로 검사하거나, 가격 변동을 확인하는 데 이런 도구들을 쓰고 있다.

그런데 2023년부터 완전히 다른 방식이 나타났다. AI, 특히 대형 언어 모델이 화면을 사람처럼 '보고' 이해해서 스스로 다음에 뭘 해야 할지 판단하는 방식이다. 예전엔 "정확히 이 위치의 이 버튼"이라고 못 박아야 했다면, 이제는 "로그인 버튼 눌러줘"라고만 말해도 AI가 화면을 훑어보고 알아서 찾아 누른다. 마치 사람에게 심부름을 시키듯 명령하는 셈이다.

이게 왜 중요할까? 예전 방식은 사이트가 조금만 바뀌어도 다시 프로그램을 고쳐야 했는데, AI 방식은 사람처럼 화면을 이해하니까 디자인이 바뀌어도 어느 정도는 스스로 적응할 수 있다. 반면 단점도 있다. AI가 화면을 잘못 읽고 엉뚱한 버튼을 누를 위험이 있고, 화면을 매번 분석하다 보니 속도가 느리고 비용도 더 든다.

또 하나 생각해볼 점은, 많은 웹사이트가 애초에 "자동으로 접속하지 마세요"라는 규칙(이용약관)을 걸어두고 있다는 것이다. 기술적으로 가능해졌다고 해서 아무 데나 마음대로 써도 되는 건 아니라는 뜻이다.

결국 지금은 정확하고 반복적인 작업은 예전 방식으로, 사람처럼 판단이 필요한 복잡한 작업은 AI 방식으로 나눠 쓰는 쪽으로 흘러가고 있다. 완전히 새로운 기술이라기보다, 도구 상자에 새 도구가 하나 더 생긴 셈이다.

여러분이 좋아하는 게임 속 캐릭터를 상상해보세요. 누가 조종하지 않아도 스스로 길을 찾아 움직이는 캐릭터요. 웹 자동화는 그것과 비슷해요. 사람이 직접 인터넷 화면을 클릭하지 않아도, 컴퓨터가 알아서 버튼을 누르고 글자를 써주는 기술이에요.

옛날 방식은 로봇 청소기가 정해진 길만 왔다갔다하는 것과 비슷했어요. "왼쪽으로 가서 버튼을 눌러"라고 아주 정확하게 알려줘야만 움직일 수 있었죠. 그런데 방 가구 위치가 바뀌면(웹사이트 디자인이 바뀌면) 로봇 청소기가 헷갈려서 멈춰버렸어요.

요즘은 다르답니다. 똑똑한 AI가 마치 사람처럼 화면을 눈으로 보고 "아, 저게 로그인 버튼이구나" 하고 스스로 알아차려요. 정확한 위치를 알려주지 않아도, "로그인 버튼 눌러줘"라고만 말하면 AI가 화면을 둘러보고 찾아서 눌러줘요. 마치 심부름을 시켰을 때 똑똑한 친구가 알아서 물건을 찾아오는 것과 비슷해요.

그런데 아직 완벽하진 않아요. 가끔 AI가 화면을 잘못 보고 다른 버튼을 누르는 실수를 하기도 하고, 화면을 꼼꼼히 살펴보느라 시간이 더 걸리기도 해요. 그리고 어떤 웹사이트는 "로봇은 들어오지 마세요"라는 규칙을 정해놓기도 했어요.

그래서 지금은 정해진 똑같은 일은 예전 방식 로봇이, 생각이 필요한 일은 똑똑한 AI가 나눠서 맡고 있어요. 앞으로는 더 똑똑해져서 실수도 줄어들 거예요.