在ASP.NET 2.0中操作数据之五十六:使用ObjectDataSource缓存数据
导言
就计算机科学而言,caching就是将所需要的数据或信息的备份放在某个地方,便于快速访问的这样一个过程。以数据处理(data-driven)程序为例,程序的大部分时间浪费在数据查询上。要提升这种程序的性能,通常的做法是将查询结果存放在程序的存储器里。
asp.net 2.0提供了各种各样的缓存方式。对web页面和用户控件可以通过output caching进行缓存;同样我们可以通过objectdatasource 和sqldatasource控件,在控件级(control level)对数据进行缓存;同时,asp.net的data cache提供了丰富的缓存接口(caching api),供页面开发员通过编程缓存对象。在本文及接下来的3篇文章我们将对objectdatasource的缓存属性以及data cache进行考察;我们也将探究如何在启动时对application-wide数据进行缓存,以及通过使用sql cache dependencies对缓存数据刷新。
主要的缓存要点
由于缓存通过将数据的副本放置在一个便于快速访问的地方来提高程序的总体性能。由于它仅仅是一个副本,当源数据发生改变时,副本不能同步更新。为此,页面开发员应制定一个标准将其清除出内存,可以使用如下的2种方法之一:
time-based标准:向内存添加的条目(item),只能在内存里驻留固定或灵活(sliding)的一段时间。比如,开发者可设定一个时间段,比如60秒,当条目添加到内存后,不管访问它的频率有多高,60秒后就会被清除掉;如果是灵活(sliding)处理的话,当最后一次被访问后,未再次被访问的时间一旦超出60秒,也会被清除掉。
dependency-based标准:当向内存添加条目时为其分配一个从属体(dependency),当条目对应的从属体发生改变时将条目清除掉。从属体可以是一个文件;另一个缓存条目;或者干脆是这两者的混合体( combination);当然还可以是sql cache dependencies,它可以向内存添加条目,当源数据改变时将条目清除掉。我们将在接下来的文章《使用sql缓存依赖项sqlcachedependency 》里详细考察。
不管是哪种标准,在条目被清除掉以前,我们都可以对其访问。如果内存达到了它的极限,它会清除掉已有的条目后再添加新的条目。因此,当处理缓存数据时很重要的一点是我们要充分考虑到缓存数据已被清除的可能。在下一篇文章《》我们考察采用哪种模式从内存访问数据。
缓存是提升程序性能的一种较为经济的方法,就像steven smith在他的文章《asp.net caching: techniques and best practices:》里阐述的一样:“缓存是获得‘上佳'性能的一种好方法,不需要太多的时间和分析。… 存储器也便宜,要获得你期望的性能,靠缓存技术你需要花30秒;靠优化代码和数据库你可能要几天乃至几周时间…”
虽然缓存可以显而易见的提升系统性能,但并不是适用于所有的应用程序,比如某些实时(real-time)、频繁更新数据的程序就不适合。
但是对大部分程序而言,还是适用的。关于asp.net 2.0里的缓存的更多背景资料请参考asp.net 2.0 quickstart tutorials系列的caching for performance 部分。
第一步:创建caching页面
在我们开始以前,首先让我们花些时间来添加包括本篇在内的最近四篇教程需要用到的页面。我们先在项目中新建一个称作caching的文件夹,接下来,为目录新增以下几个页面,并配置为使用site.master母板页。
default.aspx
objectdatasource.aspx
fromthearchitecture.aspx
atapplicationstartup.aspx
sqlcachedependencies.aspx
图1:创建相关的asp.net页面
像其它文件夹一样,caching文件夹里的default.aspx页面将本系列的文章显示出来。记得用户控件sectionleveltutoriallisting.ascx提供该功能,设计模式里将其拖到页面上。
图2:为default.aspx页面添加用户控件sectionleveltutoriallisting.ascx
最后,将这些页面添加到web.sitemap文件里,特别的,放在“working with binary data” <sitemapnode>:之后:
<sitemapnode title="caching" url="~/caching/default.aspx" description="learn how to use the caching features of asp.net 2.0."> <sitemapnode url="~/caching/objectdatasource.aspx" title="objectdatasource caching" description="explore how to cache data directly from the objectdatasource control." /> <sitemapnode url="~/caching/fromthearchitecture.aspx" title="caching in the architecture" description="see how to cache data from within the architecture." /> <sitemapnode url="~/caching/atapplicationstartup.aspx" title="caching data at application startup" description="learn how to cache expensive or infrequently-changing queries at the start of the application." /> <sitemapnode url="~/caching/sqlcachedependencies.aspx" title="using sql cache dependencies" description="examine how to have data automatically expire from the cache when its underlying database data is modified." /> </sitemapnode>
完成web.sitemap文件的更新后,让我们在浏览器里查看,左边的菜单栏显示caching章节的文章
图3:网站地图site map包含了caching章节的文章
第二步:在web page页面里展示产品
本文考察怎样使用objectdatasource控件内置(built-in)的缓存功能。在开始之前,我们首先需要创建一个页面,用一个objectdatasource控件调用productsbll class类获取产品信息,再用gridview控件展示出来。
首先打开caching文件夹里的objectdatasource.aspx页面。从工具箱拖一个gridview控件到页面,设置其id为products,再从智能标签里选择将其绑定到一个objectdatasource控件,id为productsdatasource。设该objectdatasource使用productsbll class类。
图4:设置objectdatasource控件使用productsbll class类
在本页面,我们要创建一个允许编辑的gridview控件,当objectdatasource控件里的缓存数据发生改变时,我们可以通过gridview的界面查看到底会发生什么。在select标签里选择默认的getproducts()方法, 但是在update标签里选择接受productname, unitprice 和productid作为输入参数的updateproduct()重载方法。
图5:在update标签里选择重载的updateproduct()方法
最后,在insert和delete标签里选择“(none)”,点完成按钮。一旦完成“设置数据源向导”,visual studio会将objectdatasource控件的oldvaluesparameterformatstring属性设置为original_{0}。就像在前面的教程之16章《》里探讨的一样,该属性要么删除掉,要么设置为{0},不然的话更新操作会报错。
此外,完成向导后,visual studio会将产品的所有数据列添加到gridview控件,将除了productname, categoryname和unitprice之外的所有绑定列(boundfields)删除。然后,分别将上述3列的headertext属性改为product”, “category”和“price”。由于productname是必需的,将productname列转变成模板列(templatefield),在edititemtemplate里添加一个requiredfieldvalidator控件;同样的,将unitprice列也转换成模板列,并添加一个comparevalidator控件,确保用户输入的是大于或等于0的有效的货币值。除此以外,你还可以作一些界面上的改进,比如使unitprice值居中,或分别对unitprice的只读和编辑界面作一些格式化的处理。
在gridview的智能标签里点相关项启动编辑、分页、排序功能。
注意:想回顾怎样自定义gridview的编辑界面吗?请参考前面的文章之20《》
图6:启用gridview的编辑、排序、分页功能。
完成gridview的修改后,gridview 和 objectdatasource的代码声明看起来像下面这样:
<asp:gridview id="products" runat="server" autogeneratecolumns="false" datakeynames="productid" datasourceid="productsdatasource" allowpaging="true" allowsorting="true"> <columns> <asp:commandfield showeditbutton="true" /> <asp:templatefield headertext="product" sortexpression="productname"> <edititemtemplate> <asp:textbox id="productname" runat="server" text='<%# bind("productname") %>'></asp:textbox> <asp:requiredfieldvalidator id="requiredfieldvalidator1" display="dynamic" controltovalidate="productname" setfocusonerror="true" errormessage="you must provide a name for the product." runat="server">*</asp:requiredfieldvalidator> </edititemtemplate> <itemtemplate> <asp:label id="label2" runat="server" text='<%# bind("productname") %>'></asp:label> </itemtemplate> </asp:templatefield> <asp:boundfield datafield="categoryname" headertext="category" readonly="true" sortexpression="categoryname" /> <asp:templatefield headertext="price" sortexpression="unitprice"> <edititemtemplate> $<asp:textbox id="unitprice" runat="server" columns="8" text='<%# bind("unitprice", "{0:n2}") %>'></asp:textbox> <asp:comparevalidator id="comparevalidator1" controltovalidate="unitprice" display="dynamic" errormessage="you must enter a valid currency value with no currency symbols. also, the value must be greater than or equal to zero." operator="greaterthanequal" setfocusonerror="true" type="currency" runat="server" valuetocompare="0">*</asp:comparevalidator> </edititemtemplate> <itemstyle horizontalalign="right" /> <itemtemplate> <asp:label id="label1" runat="server" text='<%# bind("unitprice", "{0:c}") %>' /> </itemtemplate> </asp:templatefield> </columns> </asp:gridview> <asp:objectdatasource id="productsdatasource" runat="server" oldvaluesparameterformatstring="{0}" selectmethod="getproducts" typename="productsbll" updatemethod="updateproduct"> <updateparameters> <asp:parameter name="productname" type="string" /> <asp:parameter name="unitprice" type="decimal" /> <asp:parameter name="productid" type="int32" /> </updateparameters> </asp:objectdatasource>
如图7所示,gridview列出了每个产品的name, category和price信息。花几分钟测试页面—对结果排序,查看分页,编辑某条记录。
图7:显示每条记录的name, category和price信息
第三步:考察objectdatasource如何请求数据
id为products的gridview通过调用名为productsdatasource的objectdatasource的select()方法检索数据并将它显示出来。该objectdatasource创建业务逻辑层的productsbll class类的一个实例并调用它的getproducts()方法,该方法又调用数据访问层productstableadapter的getproducts()方法。数据访问层连接到数据库northwind,并执行已设置好了的select查询。查询数据以northwinddatatable的形式返回到数据访问层,该datatable对象再依次传回到业务逻辑层,objectdatasource、gridview控件。gridview控件为datatable里的每一数据行(datarow)创建一个gridviewrow对象,每个gridviewrow对象最终被编译为html返回到客户端,呈现在访问者的浏览器里。
任何时候,当gridview控件需要绑定时,按上述的事件发生顺序执行。比如,首次登录页面;将数据从一个页面传递到另一个页面;在gridview里排序;通过gridview内建的编辑或删除界面改动数据。当gridview的视图(view sta被设为disabled时,每次页面回传时也会对gridview重新绑定;当然我们可以显式地调用databind()方法来对gridview实施绑定。
为了更清除地揭示从数据库检索数据的频率,我们显示一个消息,提示在某时程序在检索数据。为此,在gridview控件上添加一个id为odsevents的label控件,清除其text属性,将其enableviewstate属性设置为false。在label控件下面再添加一个button控件,设其text属性为“postback”.
图8:在gridview上添加label 和 button控件
在整个数据检索过程中,首先触发objectdatasource的selecting事件,并调用其对应的已设置好的方法。为该事件创建一个事件处理器,添加如下的代码:
protected void productsdatasource_selecting(object sender, objectdatasourceselectingeventargs e) { odsevents.text = "-- selecting event fired"; }
每当objectdatasource开始检索数据时,label控件都会显示文本“selecting event fired”.
在浏览器访问该页面。当首次登录时,文本“selecting event fired”就会显示出来。点“postback”按钮时,我们注意到文本消失了(前提是你将gridview的enableviewstate属性设置为默认值true)。这是因为当页面回传时,gridview通过它的视图状态(view state)载入数据进行重建(reconstructed),因此不再需要通过objectdatasource检索数据库来得到数据进行重建。然而,排序、分页、编辑等都会促使gridview重新绑定到数据源,因此,文本“selecting event fired”又出现了。
图9:当gridview重新绑定到数据源时,显示文本“selecting event fired”
图10:点“postback” 按钮导致gridview从视图状态“view state”获取数据
每次分页、排序时都需要从数据库检索数据,这看起来有点浪费资源。即便gridview不支持排序和分页,任何人每次第一次登录页面时都需要从数据库检索数据(如果将view state设置为disabled的话,每次页面回转也会检索数据)。如果gridview对所有用户显示的数据都是一样话,那么额外的数据库查询是浪费。我们可以对getproducts()方法返回的数据进行缓存,再将gridview绑定到这些缓存数据。
第四步:用objectdatasource缓存数据
仅仅简单的设置某些属性,我们就可以让objectdatasource对它的检索数据自动的进行缓存。以下总结了objectdatasource控件的与缓存相关的属性:
enablecaching—必须设置为true,默认为false.
cacheduration—缓存时间,以秒为单位。默认为0,只有当enablecaching属性设置为true,且cacheduration设为大于0的值时objectdatasource控件才会缓存数据。
cacheexpirationpolicy—可设置为absolute 或 sliding。如果为absolute,当它设为多少秒时,objectdatasource就会对检索的数据缓存多少秒;如果为sliding,当它设为多少秒时,一旦超过那么多秒没有对缓存数据进行访问,就终止缓存。默认为absolute。
cachekeydependency—用该属性将objectdatasource的缓存条目(entry)与现有的缓存从属体关联起来。利用可以它将缓存条目提前从内存清除掉。绝大多数情况下用该属性把sql cache dependency与objectdatasource的缓存关联起来。这个话题我们将在后面的教程《使用sql缓存依赖项sqlcachedependency 》考察。
让我们设置id为productsdatasource的objectdatasource 的数据缓存时间为30秒。设其enablecaching属性为true;设其cacheduration属性为30;cacheexpirationpolicy属性为默认的absolute。
图11:设置objectdatasource的缓存时间为30秒
保存你的设置,并在浏览器里查看。当你第一次登录页面时,文本“selecting event fired”会显示出来,因为原始数据还未缓存。但你点“postback”按钮,或进行分页,排序,或点编辑、取消按钮时,文本“selecting event fired”就不会显示出来了。原因是只有当objectdatasource控件检索数据时才会触发selecting事件;如果objectdatasource控件是从缓存里面获取数据的话就不会触发selecting事件。
过了30秒后,数据将从内存清除;或者调用objectdatasource控件的insert, update,或delete方法的话数据也会被清除掉。因此,过了30秒后或点击“update”按钮,编辑,取消按钮,或排序、分页的话就会促使objectdatasource检索数据,触发selecting事件,文本“selecting event fired”又会显示出来。最后,再对检索得到的数据进行缓存。
注意:如果你看到文本“selecting event fired”频繁的出现,很可能是内存容量太小。如果没有足够的容量,objectdatasource添加到内存的数据可能被清除掉了。如果objectdatasource没有或者只是偶尔地对数据缓存,请关闭一些应用程序来释放掉内存,然后再试一次。
图12揭示了objectdatasource的缓存流程。当文本“selecting event fired”出现在屏幕上时,那是因为数据没有在缓存里找到,必须进行相关检索。当文本消失时,那是因为数据进行了缓存。当从缓存得到了所需的数据时,没有任何数据查询执行。
图12:objectdatasource在data cache里存储和获取数据
每一个asp.net应用程序有它自己的数据缓存实例,所有的页面和用户都可以进行访问。那意味着对于objectdatasource控件缓存的数据,所有登录该页面的用户都可以访问。来做个验证,在一个浏览器里打开objectdatasource.aspx页面,当第一次登录该页面时,文本“selecting event fired”显现出来(假定前面测试时缓存的数据到此时已经被清除掉了)。再开第二个浏览器,将第一个浏览器里的url地址拷贝、粘贴过来。在第二个浏览器里,文本“selecting event fired”并没有显示出来,因为它使用的是第一个浏览器页面缓存的数据。
当向内存添加检索数据时,objectdatasource要用到一个叫cache key的值,该值包括:cacheduration 和 cacheexpirationpolicy属性的值;objectdatasource调用的业务对象的类型(type),它由typename 属性指定(比如:productsbll);selectmethod 属性的值,以及selectparameters参数集里参数的name 和 values;startrowindex 和 maximumrows属性的值,它用来执行用户自定义分页(custom paging)。
将这些属性值组合在一起构成cache key值是为了对每一个缓存条目提供唯一的标识值。比如,在前面的教程里,我们使用productsbll类的getproductsbycategoryid(categoryid)方法来获取某个指定类的所有产品。假如一个用户在页面查看饮料类(其categoryid值为1)的产品信息,如果objectdatasource控件在进行数据缓存时忽略selectparameters的值,当另一个用户登录页面查看调味品类的产品信息时,恰好饮料类产品信息正好缓存在内存里,第二个用户将会看到饮料类的产品信息,而非他想要的调味品类的产品信息。所以,当cache key值包含electparameters的值的话,objectdatasource缓存数据的时候就可以将调味品类和饮料类区分开来。
数据更新不同步(stale data)问题
当调用objectdatasource控件的insert, update和 delete其中一个方法时,它都会将缓存条目从内存清除掉。这样做的好处在于当从页面修改数据时将缓存的旧数据清除掉。然而,objectdatasource还是可能有将“未更新数据”(也就是源数据已经发生改变,而缓存的数据没同步更新)显示出来的情况。最简单的例子是直接从数据库修改数据,比如某个数据库管理员运行一个脚本,修改数据库里的某些记录。
在此,我们探讨一种微妙的情况。虽然调用objectdatasource的数据修改方法时它会将缓存数据清除掉,但清除的是那些与objectdatasource的“属性组合值”(combination of property)相匹配的缓存条目(比如cacheduration, typename, selectmethod等)。假如你有2个objectdatasources控件,它们更新相同的数据,当使用不同的selectmethods 或 selectparameters,当第一个objectdatasources控件更新某一行记录而清除该行对应的缓存数据时,第二个objectdatasources控件仍然使用该行对应的缓存数据。我们来做个验证,创建一个页面,包含可编辑的gridview控件,其对应的objectdatasource控件设置为使用缓存,且调用productsbll类的getproducts()方法来获取数据。在本页(或另外创建一个页面)再添加gridview 和objectdatasource控件,但是设置第二个objectdatasource控件调用getproductsbycategoryid(categoryid)方法。由于这2个objectdatasource控件的selectmethod属性不同,因此它们各自有各自不同的缓存值。如果你在第一个gridview控件里编辑某个产品,然后在第二个gridview控件里重新绑定数据(比如分页、排序等),我们在第二个gridview控件里看到该产品的值依然是“老的缓存数据”(而并不是第一个gridview控件修改后的值)
简而言之,如果你乐于使用“老的缓存数据”,那只有使用基于时间的缓存时间值(time-based expiries,也就是设置具体的缓存时间长度),如果对数据及时更新要求很高的话,将缓存时间设短点。如果不允许使用“老的缓存数据”的话,要么放弃缓存,要么使用sql cache dependencies(你可以认为它是你缓存的数据库数据)。我们将在后面探讨sql cache dependencies。
总结:
在本文我们考察了objectdatasource内建的缓存功能。仅仅设置很少的属性,我们可以将objectdatasource调用selectmethod方法得到的数据进行缓存。其cacheduration 和 cacheexpirationpolicy属性指定了缓存的时间和类型(absolute或sliding)。而cachekeydependency属性将objectdatasource的缓存实体与现有的缓存从属体(cache dependency)关联起来,一般是sql cache dependencies。
因为objectdatasource只是简单地进行数据缓存,我们可以通过编程实现objectdatasource内建的这种功能。不过在表现层这样做没有意义,因为objectdatasource控件提供了该功能。不过我们可以在体系结构的其它层次实现缓存功能。为此,我们需要一个逻辑,它与objectdatasource调用的相同。在下一篇文章我们将考察如何在体系结构内部编程处理数据缓存。
祝编程快乐!
作者简介
本系列教程作者 scott mitchell,著有六本asp/asp.net方面的书,是4guysfromrolla.com的创始人,自1998年以来一直应用 微软web技术。大家可以点击查看全部教程《[翻译]scott mitchell 的asp.net 2.0数据教程》,希望对大家的学习asp.net有所帮助。