2337
2011-12-01 09:28:52
1
다르죠, http는 8080포트를 쓰는데 토르네트워크는 별도의 포트를 사용하고, IP또한 3중의 프로텍트가 데이터링크레이어 수준에서 걸리기 때문에 TCP와 호환도 안됩니다.(TCP를 기반으로 변형한 것이지만, 일반 TCP가 토르네트워크에 접근 못하죠)
그냥 규격외 http가 아니라 html 서비스를 제공하는 다른 프로토콜수준입니다
무엇보다 robot.txt는 제한없는 협약이라서 봇을 만들때 robot.txt의 내용을 무시하도록 만들면 뚫리는데 딥웹은 그것도 안되요