it-gundan.com

Yahoo Search는 Bing Search와 동일합니까?

우리는 Yahoo의 과거에 잘못 쓰여진 거미 와 관련하여 심각한 문제를 겪었고 그 결과 차단했습니다. Tumblr의 Marco Arment는 2009 년 8 월 31 일에 우리와 좌절감을 나누었습니다.

[Yahoo 's Spider]는 EST 약 5:30 이후 초당 70-200 건의 요청으로 우리를 범람 시켰습니다. 나는 과거에 우리를 학대했던 악의적 인 "실험적인"크롤러들조차도 이와 같은 것을 본 적이 없습니다. Robots.txt 금지만으로는 충분하지 않습니다.로드 밸런서 수준에서 IP로 차단해야합니다. 과거에 스택 오버플로를 악용 했으므로 알고 싶을 것 같습니다.

Yahoo의 웹 검색이 "Powered by Bing!"인 것 같습니다. 지금. 우리는 Bing의 스파이더 (일명 MSNBOT)에 문제가 없었기 때문에 좋습니다.

야후의 검색은 현재 Bing 검색과 동일합니까? 아니면 모든 가능성에 반하여 너무 열심히 빨지 않으면 잠재적으로 차단을 해제해야합니까?

25
Jeff Atwood

Yahoo의 검색 로봇을 차단 해제 할 이유가 없습니다. Yahoo가 Bing Engine을 사용하는 방법에는 두 가지가 있습니다. 그들은 그것을 자체적으로 통합하고 하이브리드 크롤러를 인터넷에서 느슨하게 만들거나 쿼리를 Bing Engine으로 보내고 결과를 내뱉을 수 있습니다.

Joel과 연결된 문서에는 다른 문서 here 가 있습니다. 야후는 "7 월 중순부터 Bing에서 Yahoo! 로의 유기적 결과 전달 테스트를 시작했다"고 밝혔다. 저에게 야후는 Bing Engine과 긴밀하게 통합되지 않습니다. 그들은 단순히 Bing Engine API를 호출합니다. 야후 엔진이 장기적으로 사라지기 때문에 필요한 작업 관점에서도 가장 의미가있다.

즉, 결과의 100 %가 Bing Engine에서 나오면 Yahoo Bot이 더 이상 웹을 크롤링하는 것을 볼 수 없습니다. 따라서 차단을 해제 할 이유가 없습니다.

10
Ben Hoffman

이것이 나타납니다 방금 Yahoo!에서 Bing 검색 결과를 출시하기 시작했습니다. 8 월/9 월에 완전히 전환한다는 목표로 검색의 약 25 %를 차지했습니다. 야후 스파이더는 더 이상 실행되지 않으며 그것이 있다면 그다지 관련성이 없다고 확신합니다.

7
Joel Spolsky

월요일에 Yahoo와 검색 문의를 접수했습니다. 감사의 말에는 Bing으로의 전환에 관한 다음 메모가 포함되어 있습니다.

야후! 야후! 그리고 Microsoft Search Alliance; Microsoft 알고리즘 결과의 통합은 미국 및 캐나다 시장에서 거의 완료되었습니다. 야후! 검색이 현재 새로운 통합을 테스트 중이며 검색 중에 다른 환경을 경험할 수 있습니다. 이 테스트에서 일부 기본 검색 목록은 Microsoft 웹, 이미지 및 비디오 결과를 사용합니다. Yahoo!에서 기대할 수있는 모든 개선 사항! 검색은 유지되며 검색 환경에 대한 새로운 개선 사항이 계속 혁신 될 것입니다.

이것은 테스트 단계 일 뿐이므로 모든 검색에서 다른 결과가 생성되는 것은 아니며 변경 사항이 명확하지 않을 수도 있습니다. 한 키워드에서 다른 키워드로 동일한 키워드의 결과가 다를 수 있습니다. 순위 및 인덱싱 알고리즘이 다르므로 검색 결과가 다른 순서로 나타날 수 있습니다. 이전에 나타나지 않은 검색 결과가 포함될 수 있으며 이전에 포함 된 검색 결과가 표시되지 않을 수 있습니다. 새로운 결과를 철저히 테스트 해 주셔서 양해 해 주셔서 감사합니다.

Yahoo!에 문의 해 주셔서 감사합니다. 검색.

4
Gareth Williams
1
John Conde