搜索引擎是怎样知道(发现)一个新站点的

这里有个问题,你是如何知道百度收录了它呢
■网友
你用的万网解析,你有没有想过是万网和百度合作,任何解析直接推送百度?
■网友
搜索引擎都有一个爬虫程序,会通过主机的同ip网站,、网站指向的超链接以及爬虫对新域名的检测等方式去抓取它们想要的信息。即使你的网站没有做任何提交以及公布,只要网站上线了都会抓取得到。如果网站暂时不想被收录,可以通过robots.txt协议来进行设置,阻止爬虫收录指定的网站地址。
■网友
你的浏览器,你的域名服务器提供商,某某不知道藏在哪里的百度插件,都有可能出卖你
■网友
只要你没有设置robots蔽蜘蛛,2-3收录新站很正常。百度蜘蛛还算勤快,但一般收录,却短期内不给排名
■网友
【搜索引擎是怎样知道(发现)一个新站点的】 跟其他网站在同个主机也是可以被抓取的
明摆着发外链


    推荐阅读