將網(wǎng)站等級(jí)到搜索引擎之后,搜索引擎就會(huì)自動(dòng)抓取用戶網(wǎng)站的信息。對(duì)于中文網(wǎng)站來說,使用量排名前四名的搜索引擎幾乎占據(jù)了99%以上的搜索量,因此著重關(guān)注這幾個(gè)搜索引擎即可。提交搜索引擎的步驟是:1、制作sitemaps文件,并將其添加到robots.txt中;2、登錄四大搜索站長(zhǎng)平臺(tái);3、提交sitempas和URL到平臺(tái)上。4、觀察站長(zhǎng)平臺(tái)對(duì)于網(wǎng)站的收錄和抓取情況。Sitemaps協(xié)議使網(wǎng)站能夠告知搜索引擎網(wǎng)站中可供抓取的網(wǎng)址,以便于搜索引擎更方便地抓取網(wǎng)站。而sitemap.xml是遵守該協(xié)議的包含了一個(gè)網(wǎng)站所有鏈接的xml格式文件。簡(jiǎn)單的來說,sitemap就是網(wǎng)站地圖。Sitemaps是一個(gè)和網(wǎng)站管理員相關(guān)的工具。
有點(diǎn)象BLOG的RSS功能,是一個(gè)方便自己的服務(wù),如果大家(互聯(lián)網(wǎng)上所有的信息源)都采用了這種方式提交自己的更新的話,搜索引擎就再也不用派出那么多爬蟲辛辛苦苦的到處亂竄了,任何一個(gè)站點(diǎn),只要有更新,便會(huì)自動(dòng)“通知”搜索引擎,方便搜索引擎進(jìn)行索引。首先用戶在各個(gè)搜索引擎的站長(zhǎng)平臺(tái)創(chuàng)建帳號(hào),驗(yàn)證自己的網(wǎng)站權(quán)限,然后登錄站長(zhǎng)平臺(tái),在提交Sitempas界面里提交自己網(wǎng)站的sitemap.xml文件。sitemap.xml文件可以手工編寫,也可以通過軟件自動(dòng)生成,sitemap.xml文件創(chuàng)建好了之后可以提交給各個(gè)搜索引擎。Sitemaps文件是XML格式的,用于概括與Web抓取工具相關(guān)的Sitemaps信息。對(duì)于每個(gè)網(wǎng)址。