1、 我們的網站是用C#開發的，我們采用數據庫存儲所有文章信息。所以我們的文章都是動態地從數據庫中提取出來的。這點很不利於蜘蛛的順籐摸瓜。
2、 這點嘛，嘿嘿，就有些勉強了。做個網站地圖，可以讓用戶對敝網站的內容一目了然，能起到很好的導航作用。
鑒於上述原因，於是乎，俺就決定為俺地“赤兔英語網”做一個網站地圖。由於Google等搜索引擎所需的網站地圖必須是XML文件，所以俺決定做網頁形式和XML形式兩種網站地圖。我們的網站是用C#開發的，當然是使用C#語言來編寫俺地網站地圖了，赫赫。
首先，我們來看看，我們的網站地圖該怎麼生成，怎麼展現。簡單思考之後，我決定這樣做。網站首頁的菜單中添加“網站地圖”選項，其鏈接著網頁形式的網站地圖，頁面名字為sitemap.html；首頁的底部也添加鏈接“網站地圖”，其鏈接著XML格式的網站地圖，頁面名字為sitemap.xml。這兩個頁面生成程序在後台添加。設置一個按鈕，管理員在一段時間內點擊該按鈕，直接生成這兩個文件，放在網站的根目錄下，供客戶端隨時調用。
下面，我們來看看生成網站地圖的代碼的具體實現。為了文章可讀性，我們從頂向下來對code實現過程做以介紹。
一、網站地圖的頂層設計 頂層的網站地圖生成按鈕的code為：
protected void BtnGenerateSitemap_Click(object sender, EventArgs e)
{
createHtmlSitemap();
createXMLSitemap();
WebUtility.ResponseScript("網站地圖生成完畢！",0);
}
上面code一目了然，createHtmlSitemap()用來生成html網站地圖，createXMLSitemap()用來生成XML網站地圖。
二、Html網站地圖的生成 我們先介紹Html網站地圖的生成。createHtmlSitemap()的code如下：
public void createHtmlSitemap()
{
FileInfo HtmlFile = null;
StreamWriter WriteHtmlFile = null;
string FilePath = Server.MapPath("sitemap.html");//獲取html文件路徑及名稱
HtmlFile = new FileInfo(FilePath);//創建html文件
WriteHtmlFile = HtmlFile.CreateText();
WriteHtmlFile.WriteLine("<html>");
WriteHtmlFile.WriteLine("<head>");
WriteHtmlFile.WriteLine("<meta http-equiv=Content-Type content=text/html;charset=UTF-8>");
WriteHtmlFile.WriteLine("<title>赤兔英語網 網站地圖</title>");
WriteHtmlFile.WriteLine("</head>");
WriteHtmlFile.WriteLine("<body>");
getHtmlSitemapData(WriteHtmlFile);
WriteHtmlFile.WriteLine("</body>");
WriteHtmlFile.WriteLine("</html>");
WriteHtmlFile.Close();
}
上述code創建了html文件sitemap.html，並使用對象StreamWriter書寫了sitemap.html。函數getHtmlSitemapData(WriteHtmlFile)完成了sitemap.html正文部分的組織。
需要注意的是，如果網站地圖中有中文，必須將charset設置為UTF-8。否則中文不能正常顯示。
public void getHtmlSitemapData(StreamWriter writerFile)
{
string classTableName = "ArticleClass";
string articleItemTableName = "ArticleItem";
string connectionString = ConfigurationManager.AppSettings["SQLConnString"].ToString();
SqlConnection conn = new SqlConnection(connectionString);
if (conn.State == ConnectionState.Closed)
{
conn.Open();
}
//查詢大類信息
SqlDataAdapter classDataAdpt = new SqlDataAdapter("SELECT Id, Classname FROM " + classTableName, connectionString);
DataSet classDataSet = new DataSet();
classDataAdpt.Fill(classDataSet, classTableName);
writerFile.WriteLine("<table border='1' width='1000px'cellspacing='0' cellpadding='0'>");
//按照大類信息來查取各個大類下的文章信息
for (int i = 0; i < classDataSet.Tables[0].Rows.Count; i++)
{
string tempsql = "SELECT Id, ArticleTitle, Parentid FROM " + articleItemTableName + " where Parentid = " + classDataSet.Tables[0].Rows[i][0].ToString();
SqlCommand cmd = new SqlCommand(tempsql, conn);
if (conn.State == ConnectionState.Closed)
{
conn.Open();
}
SqlDataReader rdr = cmd.ExecuteReader(CommandBehavior.CloseConnection);
if (rdr.HasRows)
{
int classId = 0;
int rowNum = 0;//記錄處理了篇文章信息
int memberInLine = 5;//每行顯示多少篇文章的鏈接信息
while (rdr.Read())
{
//處理大類信息，大類也需要以超鏈接的方式寫入html文件
if (classId != int.Parse(rdr[2].ToString()))
{
rowNum = 0;
classId = int.Parse(rdr[2].ToString());
writerFile.WriteLine("<tr>");
writerFile.WriteLine("<td colspan='5'>");
writerFile.WriteLine("<a style='font-size:15px;font-weight:bold;' target='_blank' href='http://www.chituwang.com/Article/index.aspx?parentid=" + classDataSet.Tables[0].Rows[i][0].ToString() + "'>" + classDataSet.Tables[0].Rows[i][1].ToString() + "</a>");
writerFile.WriteLine("</td>");
writerFile.WriteLine("</tr>");
}
//處理文章信息
rowNum++;
if (1 == (rowNum % memberInLine))//a new line
{
writerFile.WriteLine("<tr>");
}
writerFile.WriteLine("<td style='width:200px'>");
writerFile.WriteLine("<a target='_blank' href='http://www.chituwang.com/Article/index.aspx?articleid=" + rdr[0].ToString() + "'>" + rdr[1].ToString() + "</a>");
writerFile.WriteLine("</td>");
if (0 == (rowNum % memberInLine))//a new line
{
writerFile.WriteLine("</tr>");
}
}
}
rdr.Close();
}
writerFile.WriteLine("</table>");
}
三、XML網站地圖的生成 XML網站地圖的生成與Html不同點在於，Google等搜索引擎對這種網站地圖的格式有嚴格的要求，必須遵守，否則不會被他們承認。具體xml文件格式可參考http://www.chituwang.com/Article/WZJS/detail.aspx?articleid=18092
createXMLSitemap()函數的實現如下：
public void createXMLSitemap()
{
FileInfo XMLFile = null;
StreamWriter WriteXMLFile = null;
string FilePath = Server.MapPath("sitemap.xml");
XMLFile = new FileInfo(FilePath);
WriteXMLFile = XMLFile.CreateText();
//下面兩句話必須寫，而且不能做任何修改
WriteXMLFile.WriteLine("<?xml version=\"1.0\" encoding=\"UTF-8\"?>");
WriteXMLFile.WriteLine("<urlset xmlns=\"http://www.google.com/schemas/sitemap/0.84\">");
getXMLSitemapData(WriteXMLFile);
WriteXMLFile.WriteLine("</urlset>");//別忘了這句話
WriteXMLFile.Close();
}
createXMLSitemap()的實現如下：
public void getXMLSitemapData(StreamWriter writerFile)
{
string classTableName = "ArticleClass";
string articleItemTableName = "ArticleItem";
string connectionString = ConfigurationManager.AppSettings["SQLConnString"].ToString();
SqlConnection conn = new SqlConnection(connectionString);
if (conn.State == ConnectionState.Closed)
{
conn.Open();
}
//查詢大類信息
SqlDataAdapter classDataAdpt = new SqlDataAdapter("SELECT Id, Classname FROM " + classTableName, connectionString);
DataSet classDataSet = new DataSet();
classDataAdpt.Fill(classDataSet, classTableName);
for (int i = 0; i < classDataSet.Tables[0].Rows.Count; i++)
{
string tempsql = "SELECT Id, ArticleTitle, Parentid FROM " + articleItemTableName + " where Parentid = " + classDataSet.Tables[0].Rows[i][0].ToString();
SqlCommand cmd = new SqlCommand(tempsql, conn);
if (conn.State == ConnectionState.Closed)
{
conn.Open();
}
SqlDataReader rdr = cmd.ExecuteReader(CommandBehavior.CloseConnection);
if (rdr.HasRows)
{
int subClassId = 0;
while (rdr.Read())
{
//處理大類信息，
if (subClassId != int.Parse(rdr[0].ToString()))
{
subClassId = int.Parse(rdr[0].ToString());
writerFile.WriteLine("<url>");
writerFile.WriteLine("<loc>" + "http://www.chituwang.com/Article/index.aspx?parentid=" + rdr[2].ToString() + "</loc>");
writerFile.WriteLine("<lastmod>" + DateTime.Now.ToShortDateString() + "</lastmod>");
writerFile.WriteLine("<changefreq>daily</changefreq>");
writerFile.WriteLine("<priority>0.5</priority>");
writerFile.WriteLine("</url>");
}
//處理文章信息
writerFile.WriteLine("<url>");
writerFile.WriteLine("<loc>" + "http://www.chituwang.com/Article/index.aspx?articleid=" + rdr[0].ToString() + "</loc>");
writerFile.WriteLine("<lastmod>" + DateTime.Now.ToShortDateString() + "</lastmod>");
writerFile.WriteLine("<changefreq>monthly</changefreq>");
writerFile.WriteLine("<priority>0.4</priority>");
writerFile.WriteLine("</url>");
}
}
rdr.Close();
}
}
通過上面兩個小節的介紹，網頁和XML兩種形式的網站地圖就生成了。
四、網站地圖的提交
向Google提交網站地圖：
https://www.google.com/webmasters/tools/login?hl=zh_CN
1、進入這個網址，用你的Google帳戶登錄，然後添加你的網址;
2、接下來按照Google的要求驗證你網站，你可以選擇html文件驗證。
3、這時候，按照Google的要求，制作一個Google要求的文件名的html文件
4、用FTP講這個html文件和你的xml格式的網站地圖文件一起傳到你網站的根目錄
5、確認驗證，回到控制台，添加你的地圖文件。很快，Google就會根據網站地圖文件來更新你的網站
向yahoo提交網站地圖：
英文yahoo提交網址：
http://search.yahoo.com/info/submit.html
首先用FTP講你的網站地圖傳到網站的根目錄。打開網址後，選擇Submit Your Site for Free: 用yahoo帳戶登錄，然後輸入你的網站地圖的URL就可以了。
中文Yahoo的提交網址：
http://sitemap.cn.yahoo.com/mysites
這個操作和Google的差不多，登錄、驗證網站、提交網址地圖URL。
向MSN提交網站地圖Sitemap: 用URL直接提交：http://api.moreover.com/ping?u=http://your.domainname/sitemap.xml
這是向MSN直接提交網站地圖的後門URL
向ASK提交網站地圖Sitemap: 直接提交。http://submissions.ask.com/ping?sitemap=http://your.domainname/sitemap.xml
向網店聯盟提交地址：http://www.dianmeng.com/
向百度Baidu提交網站地圖Sitemap: 沒辦法，現在百度不支持Sitemap。但可通過http://www.baidu.com/search/url_submit.html來提交你的網址。
