用 Asp.Net 建立一个在线 RSS 新闻聚合器

原代码下载：RSSAggregator.msi
原文出处：Creating an Online RSS News Aggregator with ASP.NET

概要

　　本文讲解了如何使用 XML Web 控件获取远程XML数据并在 ASP.NET 页面显示这些XML数据，以及使用Repeater控件发布数据库中的XML数据。在过去的几年间，随着异构平台间共享数据的需求不断增长，XML的使用也呈爆炸性增长。意识到这种趋势，微软在整个.NET框架中对 XML 提供了健壮的支持。这意味着，对于 ASP.NET 开发者来说，在Web页面 中显示和处理 XML 数据从来没有这么容易过。本文将通过生成一个 RSS2.0 聚合引擎和在线新闻聚合器来学习 XML 和 ASP.NET 技术。 本文假设读者熟悉 ASP.NET 和 XML。

目录

简介
使用 RSS 2.0 规范的聚合内容
通过 ASP.NET 页面输出聚合内容
在 ASP.NET 页面中使用聚合摘要
显示聚合摘要列表
显示特定聚合摘要的新闻项
显示特定新闻项的详细内容
未来的扩展和当前程序的缺点
总结

简介

　　随着办公室和家庭上网在线时间的延长，以及 Web 站点和可访问的互联网应用程序呈持续爆炸性增长，应用程序之间能数据共享变得越来越重要。在异构平台之间共享数据需要一种平台中立的数据格式，这种数据格式要求能易于通过标准的互联网协议来传输，而这正是XML的用武之地。因为XML文件本质上只是一个文本文件，其编码格式众所周知，而且现有的XML解析器能为所有主流编程语言所用，所以XML数据能被任何平台轻松使用。
　　Web 网站聚合就是一种使用 XML 来共享数据的范例，在新闻站点和网志中经常可以看到。采用 Web 网站聚合技术，网站能以 XML 格式的 Web 可访问的聚合文件来发布最新内容。网站使用的聚合格式有很多种，其中最流行的一种格式就是 RSS2.0。（ RSS2.0 规范被发布在 Harvard Law 网站 的技术栏目上）。此外，MSDN 杂志有一个聚合文件：MSDN杂志：本期刊物， 其中列出了最新一期 MSDN 杂志上的文章，包括到在线版本文章的链接。
　　一旦 Web 站点有了公开发布聚合文件，那么不同的客户端就可以消费它。消费聚合文件的方式有很多种，比如，某个提供 .NET 技术资源的站点可能希望在网站中 添加最新的 MSDN 杂志文章标题。聚合文件还常常被新闻聚合器程序所用，这种程序被专门设计用来获取和显示不同来源的聚合文件。
　　随着人们越来越注重使用 XML 数据，在 ASP.NET 页面中处理 XML 数据的能力变得比以往更关键。既然 Web 站点聚合如此重要， 本文我们就来创建一个 Web 站点聚合文件生成程序和一个在线新闻聚合器。在建立这两个微型程序的过程中，我们将讲述如何访问和显示XML数据，不论这些数据是来自远端的Web服务器还是本地的文件系统。我们将演示如 何多种不同的方法显示XML数据，比如：用 Repeater 控件以及用 ASP.NET XML Web控件。
　　因为这只是一篇小文章，不可能长篇大论，我会假设读者您熟悉 XSLT 和 XPath。如果您不熟悉，建议在看这篇文章之前先访问以下资源：

FAQ: What is XSLT and How Does it Relate to XML? XSL Tutorial XPath Tutorial 使用 RSS 2.0 规范的聚合内容

　　本文我们将要创建的第一个微型程序是一个聚合文件生成器。针对这个迷你程序，假设你是一个大型新闻网站（如 MSNBC.com）的 Web 开发者，所有的新闻内容都保存在 Microsoft SQL Server 2000 数据库中。具体地说，这些文章是 都保存在一个名为 Articles 的表中，表中以下字段与我们的程序密切相关：

ArticleID—主键，自增长的整型字段，用来唯一标识每一篇文章； Title— 指定标题，字段数据类型： varchar(50)； Author—指定作者，字段数据类型： varchar(50)； Description—新闻内容描述，字段数据类型： varchar(2000)； DatePublished—新闻发布日期，字段数据类型：datetime

　　请注意，Articles 表中可能还有其它字段，上面所列的只是我们在创建聚合文件的时候所要用到的字段。而且，这只是一个非常简单的数据模型，在 是应用的数据库环境中，你可能会使用更加标准化的数据库模型，比如具备一个单独的 authors (作者）表，有一个建立作者和文章之间多对多关系的表等等。
　　下一步，我们将创建一个ASP.NET页面，用格式化好的 RSS2.0 XML 文件显示一个最新的新闻列表。在讲述如何在 ASP.NET 页面 中完成这种转换之前，我们要先介绍一下 RSS2.0 规范的内容。我们应该记住，在整个规范中，RSS 是被设计用来为聚合内容提供一个数据模型。那么 毫无疑问，它会有一系列的 XML 元素，用来描述 Web 站点要聚合的内容信息，以及一系列用来描述某一特定新闻项的 XML 元素。最后，不要忘记 RSS 聚合文件是一个 XML 格式文件，必须符合 XML 格式化的准则， 也就是：

所有 XML元素必须正确嵌套； 所有的属性值要用引号包含起来； <, >, &, "和''符号要相应地替换为 <,>, &, " 和 '；

　　而且，XML格式是大小写敏感的，这就意味着，XML元素的起始和终止标签必须匹配，拼写和大小写都必须一致。
　　RSS2.0 的根元素是元素，这个元素可以有一个版本号的属性，例如：

  ...

元素只有一个子元素，用来描述聚合的内容。在元素里面有三个必需的子元素，用来描述 Web 站点的信息。这三个元素是：

title—定义聚合文件的名称，一般来说，还会包括Web站点的名称； link—Web站点的URL； description—Web站点的一段简短的描述。

除此之外，还有一些可选元素来描述站点信息。这些元素的更多信息请参见 RSS2.0规范。

每一个新闻项目放在一个单独的元素中。元素可以有任意数量的元素。每个元素可以有多种的子元素，唯一的要求是最少必须包含 http://datawebcontrols.com This is the syndication feed for the FAQs at DataWebControls.com http://datawebcontrols.com/faqs/DataGrid.aspx Mon, 07 Jul 2003 21:00:00 GMT This article examines how to work with the Repeater control. http://datawebcontrols.com/faqs/Repeater.aspx Tue 08 Jul 2003 12:00:00 GMT

　　关于元素的格式有一点特别重要，再此要讲一下。RSS 要求日期必须按照 RFC822 日期和时间规范 进行格式化，此格式要求：开头是一个可选的3字母星期缩写加一个逗号，接着必须是日加上3字母缩写的月份和年份，最后是一个带时区名的时间。另外，要注意 子元素是可选的：上 述文件第一个新闻没有 元素，而第二个新闻就有一个。

通过 ASP.NET 页面输出聚合内容

　　现在，我们已经知道了如何按照 RSS2.0 规范存储我们的新闻项，我们已经就绪创建一个 ASP.NET 页面，当用户发出请求时，就会返回网站聚合 的内容。更确切地说，我们将建立一个名字叫 rss.aspx 的 ASP.NET 页面，这个页面会按照 RSS2.0 规范的格式返回 Articles 数据库表中的最新的 5 个新闻项 。
　　可以有几种方法来完成这件事，稍后将会讲到。但是现在，我们首先要完成一件事，那就是先要从数据库中获得最新的5个新闻项。这可以用下面的 SQL 查询语句获得：

SELECT TOP 5 ArticleID,Title,Author,Description,DatePublished FROM Articles ORDER BY DatePublished DESC

　　获得了这些信息以后，我们需要把这些信息转换成相应的 RSS2.0 格式聚合文件。要把数据库的数据显示为XML数据最简单、快速的方法就是使用 Repeater 控件。准确地说，Repeater 控件 将在 HeaderTemplate 和 FooterTemplate 模版里显示元素、元素以及站点相关的 元素标签，在 ItemTemplate 模版里面显示 元素。下面是我们这个 ASP.NET 页面（.aspx文件）的 HTML 部分 ：

<%@ Page language="c#" ContentType="text/xml" Codebehind="rss.aspx.cs"
  AutoEventWireup="false" Inherits="SyndicationDemo.rss" %>

  
    
      
        
        http://www.ASPNETNews.com/Headlines/
        
          This is the syndication feed for ASPNETNews.com.
        
  

  
        
          
          
             <%# FormatForXML(DataBinder.Eval(Container.DataItem, 
                                     "Description")) %>
          
          
             http://www.ASPNETNews.com/Story.aspx?ID=<%# 
                   DataBinder.Eval(Container.DataItem, "ArticleID") %>
          
          <%# FormatForXML(DataBinder.Eval(Container.DataItem, 
                                             "Author")) %>
          
             <%# String.Format("{0:R}", 
                  DataBinder.Eval(Container.DataItem, 
                                         "DatePublished")) %>
           
        
  

  
      
      
  
      

　　首先要注意的是：上面这段代码例子只包括 Repeater 控件，没有其它的 HTML 标记或 Web 控件。这是因为我们希望页面只输出 XML 格式的数据。实际上，观察一下 @Page 指令，你就会发现 ContentType 被设置为XML MIME 类型（text/xml）。其次要注意的是：在 ItemTemplate 模版里，当 在 XML 输出中添加数据库字段Title、Description 和 Author 时，我们调用了辅助函数 FormatForXML()。我们 很快就会看到，该函数被定义在后台编码的类中，其作用只是将非法的 xml 字符替换为它们对应的合法的转义字符。最后我们应该注意，在 元素里面的数据库字段 DatePublished 是用 String.Format 来格式化的。标准的格式描述符“R”对 DatePublished 的值进行相应的格式化 。
　　此 Web 页面的后台编码类代码并不复杂。Page_Load 事件处理函数只是将数据库查询结果绑定到 Repeater控件，FormatForXML()函数根据需要做一些简单的字符串替换。为 简单起见，下面的例子只列出了这两个函数的代码：

在浏览器中访问 rss.aspx 页面的截图参见图一。

图一 通过浏览器访问 Rss.aspx 页面

　　在我们生成在线新闻聚合器之前，让我谈谈这个聚合引擎一些可能的增强功能。首先，每一次访问 rss.aspx 页面的时候，都要访问一次数据库。如果预期可能有大量的人频繁地访问 rss.aspx 页面，使用输出缓存是很有价值的。其次，通常新闻网站会将聚合的内容分为不同的类别。例如：News.com 有一些专门的聚合内容区， 比如针对企业计算、电子商务、通信的内容等等。在数据库表 Articles 中加入表示类别的 Category 字段就可以很容易地提供这种支持。这样 一来，在 rss.aspx 页面中，可以接收一个表示显示分类的查询参数，然后只搜索指定的新闻项分类即可。

在 ASP.NET 页面中使用聚合摘要

　　为了测试我们刚建立的聚合引擎，我们将创建一个在线新闻聚合器，允许采集任意数量的聚合内容摘要。聚合器的界面很简单，参见图二。它包括三个框架页面。左边框架以列表形式列出了不同的聚合内容摘要。右上部框架显示所选的聚合内容摘要包含的新闻项以及查看该新闻项的链接。最后，在右下部框架则显示选中的新闻项标题和内容。顺便提及一下，这样的界面基本上是各种类型的聚合器的一个事实上的标准界面，包括新闻聚合器、email客户端软件和新闻组阅读器都是这样的界面。

图二 新闻聚合器用户界面的截图

　　第一步是创建一个html页面来建立框架用户界面。幸运的是，在Visual Studio.NET 2003 中，这一过程非常容易。只需要在Web应用程序解决方案中添加一个新 的项目，选择新项目类型为 Frameset。（我在我的工程中将这个新文件命名为 NewsAggregator.htm。我之所以将它设置为 html 文件而不是 asp.net 页面， 是因为这个页面只包括建立框架的 html 代码。每一个单独的框架会显示一个 asp.net 页面）。下一步，参见图三，Frameset 模版向导会启动，简单地选择选项“Nested Hierarchy”，然后按ok按钮就可以了。

图三 VS2003 中 Frameset 模版向导画面

　　然后 Frameset 模版向导会创建一个HTML页面，里面已经加入了框架的源代码。 只要将左边框架的src属性设置为 DisplayFeeds.aspx，它是列表显示聚合摘要 asp.net 页面的 url。至此 NewsAggreator.htm 页面就完成了。
　　以下三个部分，我们将讲述如何创建在线新闻聚合器的三个组件，它们分别是显示聚合摘要列表的 DisplayFeeds.aspx；显示特定聚合摘要新闻项 的 DisplayNewsItems.aspx；以及显示指定聚合摘要特定新闻项具体内容的 DisplayItem.aspx。

显示聚合摘要列表

　　现在我们需要创建 DisplayFeeds.aspx 页面。该页面要显示订阅的聚合摘要列表。作为示范，我将这些聚合摘要放在一个叫 Feeds 的数据库表中。当然你也可以将它们放在一个XML文件中。表 Feeds 有如下四个字段：

FeedID—主键，自增长整数类型，唯一标示一个摘要 Title—摘要名称，数据库字段类型：varchar(50) URL—RSS 摘要的 URL，数据库字段类型：varchar(150) UpdateInterval—摘要更新频率（分钟），数据库字段类型：int

DisplayFeeds.aspx 页面使用一个 DataGrid 控件显示聚合摘要的列表。这个 DataGrid 只有一个 HyperLinkColumn 列，显示 Title 字段的内容并且链接到 DisplayNewsItems.aspx 页面, 在查询字符串中 要传递 FeedID 字段的值。以下是 DataGrid 控件的声明，为简单起见，省略了一些无关的部分）：

   ...
   
     
     
   
      

　　这里要注意的关键是 HyperLinkColumn 列的定义。它的 Target 属性设置为右上部分框架的名称，这样当用户点击的时候，DisplayNewsItems.aspx 页面就会显示在右上部分的框架中。另外, 属性 DataNavigateUrlField、DataNavigateUrlFormatString 和 DataTextField 也做了相应的设置， 以便超链接显示摘要的标题，并且当点击它时，就会将用户带到 DisplayNewsItems.aspx 页面，并在查询串中将 FeedID 字段的内容传 过来。（该页面的后台代码类只访问来自 Feeds 表的摘要清单，按照 Title 字段的字母顺序返回，接着将查询结果绑定到 DataGrid 控件。 由于篇幅所限，本文在此不列出代码。）

显示特定聚合摘要的新闻项

　　我们面临的下一个任务是创建 DisplayNewsItems.aspx 页面。这个页面会以链接的形式显示所选聚合摘要的新闻项标题，当点击标题时，新闻的内容就会显示在右下部分的框架中。要完成这一任务，我们会面临以下两个主要的挑战：

通过指定的 URL 访问 RSS 聚合摘要； 将接收到的 XML 数据转换为相应的 HTML；

　　幸运的是，在.NET 框架中，要实现这两个任务都不是很难。对于第一个任务，只需要两行代码，我们就可以将远程的xml数据装载到一个XmlDocument对象中。而第二个任务呢， 借助 ASP.NET XML Web 控件在ASP.NET 页面中显示XML数据也比较容易。
　　XML Web 控件被设计用于在 Web 页面中显示原始或者转换过的 XML 数据。使用 XML Web 控件的第一步是定义XML数据源，通过 定义一系列的属性，用许多方法都可以完成这一工作。使用 Document属性，你可以指定一个 XmlDocument 实例作为 XML Web 控件的 XML 数据源。如果XML数据存在于 Web 服务器文件系统的一个文件中，可以用 DocumentSource 属性，只要提供该 XML 文件的相对或者绝对路径就可以了。最后，如果你 的 XML数据是一个字符串，那么你可以将这个字符串的内容赋给控件的 DocumentContent 属性。这三种办法都可以将 XML 数据与 XML 控件联系起来。
　　通常，在将 XML 数据显示到 Web 页面之前，我们会以某种方式转换 XML 数据。XML Web 控件允许我们指定一个 XSLT 样式表来做这个转换工作。与 XML 数据相似，XSLT 样式表可以通过 两个属性之一，以两种不同的方式中的一种来设置，一是 Transform 属性可被赋值给 XslTransform 实例，二是将本地 Web 服务器上 XSLT文件的 相对或绝对路径赋予 TransformSource 属性。
　　现在我们来创建 DisplayNewsItems.aspx 页面。在添加 XML Web 控件以及编写后台代码类之前，我们需要在 HTML 部分加入一小段客户端 JavaScript 代码。准确地说，是在 html 部分的 标签里面 添加如下的

　　每当 DisplayNewsItems.aspx 页面装载的时候，这段客户端 JavaScript 代码会在右下角的框架中显示一个空白页。为了理解为什么要加入这段代码，我们来看看省略这段代码，我们会碰到什么情况：

用户在左边的框架中点击聚合摘要，浏览器会在右上部的框架中装载摘要新闻项； 用户在右上部框架中点击某个新闻项，浏览器会在右下部框架中装载这个新闻项 的详细内容； 现在用户在左边的框架中点击其它的聚合摘要，浏览器会在右上部分的框架中装载新的摘要新闻项；

　　现在，前一个新闻项的详细内容还显示在右下部的框架中！通过上面的客户端 Javascript 代码，每次点击左面框架的摘要便可以清除右下部框架 的内容，以消除这一瑕疵。
　　现在我们处理了客户端代码的问题之后，让我们把注意力转到添加 XML Web 控件。一旦加入 XML Web 控件，将其 ID 属性设置为 xsltNewsItems，TransformSourc 属性设置为 NewsItems.xslt（我们将要创建的 XSLT 样式表文件的名称）。现在，在 Page_Load 事件处理函数中，我们需要 在某个 XmlDocument 实例中获取远程 RSS 聚合文件，然后将该 XML Web 控件的 Document 属性赋给该 XmlDocument 实例。

　　在 Page_Load 事件处理函数中，与我们要实现的任务有密切关系的代码是最后三行代码。这三行代码创建一个新的 XmlDocument 对象， 加载远程 RSS 摘要内容，然后将这个 XmlDocument 对象赋给 XML Web 控件的 Document 属性。访问远程 XML 数据并 将它们显示在 ASP.NET 页面中就是这么简单，难道给你留下的印象不深吗？
　　剩下我们要做的一件事就是创建 XSLT 样式表，NewsItems.aspx。下面是样式表的第一版的草稿：

   

   
      
      
         

            
               
                  DisplayItem.aspx?ID=
   
               rbottom
               
            
            ()
         
      
   
      

　　这个XSLT样式表只有一个模版，用于匹配“/rss/channel”XPath表达式。这个模版先是以粗体显示