검색엔진이란...?
하나의 데이터베이스는 사람이 작성한 검색식을 인지하고 이를 논리적으로 연산하여 적절한 결과를 출력한다. 이 때 데이터베이스의 전체 구조 가운데 이러한 논리연산과 그 결과를 출력하는 기능을 담당하는 부분이 '협의의 검색엔진'이다. 하지만 인터넷에서는 검색엔진을 데이터베이스와 동일한 개념으로 더 확대하여 '광의의 검색엔진'으로 설명하고 있다.
특히 인터넷 검색엔진 또는 웹 검색엔진이라고 표현했을 때에는 로봇, 스파이더, 에이전트, 윔, 크롤러, 등 정보수집 프로그램을 이용해 대량으로 정보를 수집하고 하이퍼텍스트 기법을 통해 편리하게 정보를 찾아갈 수 있도록 하는 검색엔진을 가리킨다.
검색엔진과 데이터베이스
정보검색분야에서는 오래 전부터 "상용데이터베이스"(사용료를 지불해야 하는 DB)라는 것이 사용되어왔다. 렉시스, 넥시스, 다이얼로그, G-Search 등이 이에 해당된다.
오늘날 이들 상용 데이터베이스는 인터넷에 연결되어있다. 따라서 인터넷망을 통해 이들 데이터베이스에 접속하여 정보검색을 진행할 수 있다. 그러나 무제한적인 무료이용을 제공하는 것은 아니다.
검색엔진- 가공하지 않은 것 . "비정형화 된 정보"를 검색한다.
정보의 중계인 역할을 할 뿐이지 자신이 정보 자체를 담고있는 것은 아니다.
데이터베이스- 수집된 정보를 분류하고 재 가공한 "정형화 된 정보"를 대상으로 하여 검색이 진행된다. 자기 내부에 직접 정보를 가지고 있다.
* 동작방식에 의한 분류
-검색엔진이 어떤 동작형태를 가지고 있는지 즉 어떤 방식으로 이용할 수 있는지에 따른 분류이다.
주제별 검색엔진
주제별 검색엔진은 예술, 정치,경제, 스포츠, 등 각 분야별로 분류되어있는 항목을 마우스로 클릭하여 그 분야의 세부항목으로 들어가서 원하는 정보를 찾는 방식이다. 주제별 검색엔진은 특정한 분야에 어떤 정보들이 존재하고있는지 알고 싶을 때 정보를 찾기 위한 특별한 주제어나 키워드 등을 알기 힘들 때 좋은 해결책을 제시해준다. 주제별 검색엔진 중 가장 많이 알려진 것은 야후(Yahoo)이다.
* 주제별 검색엔진의 특징
| 장 점 |
단 점 |
| 특정한 분야별로 어떤 정보들이 존재하는지 알고싶을 때 유용하며 찾고자 하는 것에 대하여 특정한 주제어, 키워드 등을 알기 힘들어도 대분류를 통해 점차 범위를 좁혀나가면서 정보를 찾을 수 있다. |
원하는 정보를 얻기까지 `대분류 ' 중분류 ' 소분류 '정보`와 같이 여러 단계를 거쳐야 하고 길을 잘못 들어서면 시간만 낭비할 뿐이다. |
* 주제별 검색엔진에 해당하는 곳
- 야후 코리아 http://www.yahoo.co.kr
- ZIP http://www.zip.org
- 야후(Yahoo) http://www.yahoo.com
- 갤럭시(Galaxy) http://www.einet.net
- Argus 클리어링 하우스 http://www.clearinghouse.net
* 주제별 검색엔진에서의 키워드 검색기능
- 주제별 카탈로그 중 상당수가 키워드 입력을 통한 검색기능을 제공하고 있다.
즉 직접 키워드를 입력하여 원하는 정보로 접근하는 길을 마련하고 있는 것이다.
- 그러나 이것은 웹페이지의 본문을 대상으로 하여 검색을 진행하는 것이 아니라 해당 검색엔진의 분류항목에 있는 내용(=분류명, 웹페이지 요약구문)을 대상으로 정보를 찾는 기능이다.
키워드형 검색엔진
- 키워드형 검색엔진은 인터넷에 있는 홈페이지 내용과 URL(각 홈페이지 주소)을 자체 데이터베이스로 구축해둔 것이다.
- 찾으려는 정보 키워드를 입력함으로써 원하는 정보를 검색할 수 있다.
* 키워드형 검색엔진의 특징
| 장 점 |
단 점 |
| 몇 개의 키워드를 통하여 원하는 정보를 신속하게 찾을 수 있다. |
한 개의 키워드만 입력했을 경우 너무 많은 검색결과로 인해 정확한 정조 찾기를 할 수 없으며 색인(Index:검색엔진이 웹에 있는 정보를 분류해놓은 자료)이 정학하지 않은 때나 자료를 분류해놓은 후 해당내용이 변경되었을 때에는 원하는 정보를 찾을 수 없다. |
* 키워드형 검색엔진에 해당하는 곳
- 네이버 http://www.naver.com
- 알타포탈 http://www.alta.co.kr (한글알타비스타의 이름이 알타포탈로변경됨)
- 심마니 http://www.simmani.com
- 한미르 http://www./hanmir.com
- 엠파스 http://www.empas.com
- 라이코스코리아 http://www.lycos.co.kr
- 까치네 http://www.kachi.com
- 파이어볼(다음) http://www.fireball.co.kr
- 알타비스타 http://www.altavista.com
- Hot Bot http://www.hobot.lycos.com (핫봇이 라이코스에 합병됨)
- 라이코스 http://www.lycos.com
- 웹크롤러 http://www.webcrawler.com
- 익사이트 http://www.excite.com
- 인포시크 http://www.infoseek.com
- 마젤란 http://magellan.excite.com
- 노던라이트 http://nlsearch.com
분류등록을 동시에 제공
주제별 검색엔진이 키워드를 이용한 검색기능을 함께 서비스하듯 키워드형 검색엔진 또한 주제별 분류목록을 동시에 서비스하는 경우가 많다.
심마니, 한미르, 네이버, 익사이트, 웹크롤러, 마젤란 등 인터넷에 존재하는 대부분의 키워드형 검색엔진은 분류목록을 함께 제공한다.
메타 검색엔진(지능형 검색엔진)
메타검색엔진이란 로봇 에이전트를 이용하여 여러 검색엔진을 참조해 정보를 찾아주는 검색엔진을 말한다.
모음형 검색엔지은 각각의 검색엔진마다 하나씩의 검색어 입력상자가 제공되지만 메타검색엔진은 검색어 입력상자가 하나만 있다. 그러면서도 멀티쓰레드기법을 이용하여 여러 개의 검색엔진을 통한 동시검색기능을 제공한다.메타검색엔진은 자기소유의 데이터베이스가 없다.
* 메타 겁색엔진의 특징
| 장 점 |
단 점 |
| 한번의 키워드 입력만으로 다양한 검색엔진을 참조하여 검색을 진행하므로 간단한 정보찾기와 다양한 검색엔진에서의 출력결과를 얻을 수 있다. |
여러 개의 검색엔진을 참조하게 되므로 검색속도가 느릴 때도 있으며 특정한 엔진별로 검색에 실패할 때도 많다. 또한 수 개의 검색엔진에서 찾은 결과가 화면에 출력되기 때문에 원하는 정보를 가려내기가 어려울 수도 있다.(검색결과 융합기능이 제공될 경우 이러한 문제점을 피할 수 있다.) |
* 메타검색엔진의 종류
- 미스다찾니 http://www.mochanni.com
- 와카노 http://www.wakano.co.kr
- Savvy Search http://www.savvysearch.com
- All 4 One http://www.all4one.com
- Meta Crawler http://www.metacrawler.com
- Dogpile http://www.dogpile.com
- Ask Jeeves http://www.askjeeves.com
검색엔진의 동작 원리
Search Engine은 크게 Robot, Index, Search Engine Software의 세 부분으로 나눌 수 있습니다.
* Robot
Robot은 spider, crawler등으로도 불리는데 자신이 방문한 웹 페이지의 모든 내용을 읽고 웹 페이지에 링크되어 있는 모든 페이지들을 차례로 방문합니다. Robot은 일정한 기간을 주기로 자신이 과거에 방문했던 site들을 다시 방문함으로써 해당 page의 갱신여부를 체크합니다.
* Index
robot이 웹페이지를 방문하여 읽여진 모든 내용은 index에 저장됩니다. Index는 catalog라고 불려지기도 합니다. Index는 robot이 정리한 web page의 내용을 담고 있는 DB입니다. robot이 과거에 방문했던 웹페이지를 다시 방문 했을 때 해당 page가 갱신 되었다면 robot은 이 정보를 index로 보내어 index의 내용을 갱신 합니다. 해당 웹페이지가 index되지 않으면 그 내용은 해당 Search Engine 에서는 유효하지 못합니다. Index 가 이루어 지고 나서야 비로서 Internet 이용자들은 해당 웹 페이지의 내용이나 새로운 변경 사항을 인지할 수 있습니다.
* Search Engine Software
Search Engine Software는 검색자가 어떤 정보를 찾기 위해 키워드의 조합으로 검색을 실시했을 때 index로부터 조건에 맞는 정보들을 추출해 내고 이 정보들을 검색자가 원하는 정보에 가장 적합하다고 판단되는 순서대로 정렬하여 출력하는 프로그램을 말합니다.
* 검색 알고리즘
각 Search Engine들은 나름대로의 독특한 방식으로 이것을 결정하고 이러한 이유로 인하여 같은 키워드의 조합으로 정보를 검색하여도 각 Search Engine마다 서로 다른 결과를 보여주게 됩니다. 이러한 출력 정보의 우선 순위에 대한 알고리즘의 이해는 자신의 site가 상위에 랭크되도록 하는데 중요한 역할을 합니다. 각 Search Engine이 독특한 알고리즘을 가지고 있지만 또한 상당부분 공통되는 것도 많습니다.
