인터넷 에이전트.로봇 스스로 사이트 검색 정보 제공

'수천만개의 인터넷 사이트 가운데 내게 꼭 필요한 정보와 뉴스만 찾아볼수는 없을까. 자주 찾는사이트에 새로운 정보가 올라오면 자동으로 내 컴퓨터에 나타나도록 할 수는 없을까...'인터넷이 급속도로 확산되면서 사용자들에게 새로운 골칫거리가 떠오르고 있다. 바로 내 입맛에꼭 맞는 정보와 뉴스를 편리하게 찾는 일이다.

세계 각국에서 만들어진 웹사이트는 이미 수천만개. 이 모두를 검색하기란 사실상 불가능하다. 대부분의 사용자들이 자신의 필요에 따라 잘 만들어진 페이지를 북마크해 검색하는 방법을 택하지만 수시로 정보가 추가, 변경되기 때문에 일일이 검색해보기란 여간 번거로운 일이 아니다.

인터넷 사용자들의 이같은 고민을 덜어주는 것이 바로 인터넷 에이전트(agent)와 로봇(robot)이다.인터넷 에이전트는 사용자가 직접 참여하지 않고도 정규적으로 정보를 수집하거나 또다른 서비스를 수행하는 프로그램이다. 사용자가 제공한 여러가지 기준에 따라 인터넷의 특정 부분 또는 전체를 검색해 필요한 정보를 수집, 알아서 제공한다. 인텔리전트 에이전트라고도 불리는 이 프로그램은 현재 인기절정을 달리고 있는 검색엔진을 대신할 다음 단계의 기술로 떠오르고 있다.

대표적인 에이전트 프로그램으로 포인트캐스트(www.pointcast.com)와 마인더(www.netminder.com) 등이 있다. 포인트캐스트는 원하는 정보의 종류와 분야를 지정해두면 사용자가 컴퓨터 입력을 쉬고 있을 때 화면보호기를 대신해 최신의 뉴스를 전달해주는 프로그램이다.

마인더는 사용자가 지정한 웹페이지의 정보가 변경되면 자동으로 이를 알려주는 프로그램이다.로봇은 사용자나 다른 프로그램을 위해 활동하는 프로그램을 말한다. 인터넷상에서 가장 흔히 볼수 있는 로봇은 검색엔진에서 쓰이는 스파이더(spider) 또는 크롤러(clawler)로 불리는 프로그램.각 웹사이트에 접속해 내용을 검색하고 필요한 정보를 수집, 검색엔진에 전달함으로써 목록작성을 돕는다.

인터넷 에이전트와 로봇은 뉴스, 정보, 컴퓨터 프로그램 등의 검색은 물론 쇼핑, 금융정보, 게임등에까지 빠른 속도로 적용범위를 넓혀가고 있다. 대표적으로 알렉사 인터넷의 'Related links',인텔리시크의 'BullsEye', 'FinanceWise' 등이 있다.

'Related links'(www.alexa.com)는 최근 넷스케이프사와 전략적 제휴를 맺어 주목을 끌기도 한알렉사의 제품. 웹브라우저 화면에 페이지가 뜨면 관련된 사이트들의 리스트를 제공하는 프로그램으로 단순히 주요단어에 따라 검색하지 않고 사이트의 주요내용을 파악, 사용자의 검색경향에맞는 정보를 제공한다.

'BullsEye'(www.intelliseek.com)는 인터넷상에 있는 3백개 이상의 검색엔진과 6백개 이상의 데이터베이스를 통해 정보를 발견, 분석, 선별, 관리해주는 프로그램이다.

'FinanceWise'(www.financewise.com)는 전세계 금융관련 사이트들을 대상으로 금융관련 정보만을 추출, 분석해 제공하도록 설계됐다.

이밖에 웹상에서의 물건가격과 성능등을 비교해 쇼핑을 도와주는 Shopping Bot이나 상업목적에사용되는 Commerce Bot 등 다양한 종류의 로봇과 에이전트가 속속 생겨나고 있다.(www.botspot.com 참조)

인터넷 에이전트와 로봇은 기존 검색엔진이나 푸시(push) 기술과는 분명한 차이가 있다. 검색엔진이 단순히 각 사이트에 담긴 주요단어와 목록을 통해 정보를 수집해두고 사용자가 직접 끌어(pull)쓰도록 하는 반면 에이전트와 로봇은 사이트 내부를 돌아다니며 스스로 정보를 분석하고 판단해 사용자의 요구에 맞춰준다.

푸시는 사용자가 지정한 사이트의 내용이 변경될 때 새로운 정보를 제공한다는 점에서는 일맥상통한다. 그러나 뉴스공급자의 서버에서 페이지를 그대로 복사해오기 때문에 상당한 지체가 발생할 수 있고 사용자의 필요에 따른 정리, 분석이 힘들다는 단점이 있다. 〈金在璥기자〉