我有一个带有 2 页的 Web 服务器:index.html和secret.php.
的内容index.html是:
<html><body><h1>It works!</h1></body></html>
您可以看到该index.html文件没有任何链接secret.php
我没有文件 robots.txt。如果有人访问我的网络服务器。他们能知道我有一个secret.php 页面吗?
我已经用scrapy和nutch crawler进行了测试。它找不到secret.php 文件。