網絡讀者訪問流量統計分析系統的研究與實現

論文類別:理學論文 > 統計學論文
論文作者: 未知
上傳時間:2008/7/27 10:40:00

    1 前言

  隨著數字圖書館的建設,圖書館館藏資源數字化的快速發展,圖書館以網站的形式向讀者提供信息資源的服務越來越多,這些服務有圖書館門戶、馆藏資源檢索、光盤數据鏡像、電子書刊、网絡數據庫、自建數據庫和虛擬參考咨詢等等,為了揭示網络環境下讀者對這些信息资源的瀏覽情況、閱讀情況以及訪問變化趨勢,準確了解读者需求分布和需求增長等情況,從而對網絡讀者的信息資源尋求行為模式進行研究,以便能為讀者提供更好的服務,圖書館須了解以下幾个問題:網絡讀者是如何訪問網站的,這些信息資源是如何被訪問使用的,如何評價這些信息資源的利用情況等等。為了回答這些問題,我們通過本系統對圖書館多個信息資源发布網站進行讀者訪問流量統計、熱點網頁访問統計、讀者訪問來源統計析及各项專題訪問統計等研究,並根據統計结果反映的讀者需求分布和需求增長等數據對信啟、資源網站的架構、界面的設計、發布的內容加以修改和調整,以满足讀者需求為目標,吸引了讀者的目光,提高了圖书館信息資源建設和服務水平。
  本系統通过對信息資源的訪問記錄進行統计分析來了解讀者的信息需求,這種量化的方法具有客觀和經濟的優點,還可配合調查研究法得到更實際的結果,並以此探讨網絡信息計量學在對信息資源使用成效進行評估的應用,包括所遭遇的困難及應對之道,以期為信息資源的訪問評估與改進尋找可行的方法。

    2 系統的實現

  訪問量的多少是衡量网站是否成功的重要标準,但對於圖書館網站是遠遠不夠的,圖書馆需要獲取完整的讀者訪問流量統计數據,來對圖書館信息資源的使用情況進行分析,網絡信息計量學方法是目前网絡界普遍采用的網站績效评估計量法,被認為是可以用科學的方法檢驗網站訪問數據的一種工具。它的目的包括了解网絡讀者的行為、確定網站是否吸引适當的讀者來訪、評定網站建設策略是否得當。其實施步驟可分為三個階段:
  (1)記錄網站的訪問數据;
  (2)分析記錄數據;
  (3)為網站建設策略的改進提供依據。
  2.1 系統原理
  由於網絡發布站點和數據庫本身具備了訪問計量功能,各自的信息資源收藏狀況便於人們掌握,並且能自動記錄讀者訪問的登錄情況,如登錄名、登錄時間、浏覽文件、讀者的來源地址等,這些数據資料能夠準確反映讀者訪問信息和來源分布等情況,所以依據圖書館網絡讀者訪問統計的工作內容,制定相應的分析指標,並收集網絡讀者訪问圖書館信息資源發布站點形成的日誌文件,然后利用日誌統計工作軟件定時對日誌文件進行處理,得到統計數據,并動態生成各種表達形式的能滿足圖書館各項統計分析工作的報表。最後把生成的分析報表導入到發布數據庫中發布出去。
  圖書館各個网絡資源站點建設人員可通過瀏覽網絡讀者訪問流量統計分析報告,分析和了解讀者的访問需求,從而做好網絡信息資源的建設工作。
  讀者行為分析研究則可通過對分析報告進行質化研究,並結合一般調查法、咨詢研究法對读者的信息尋求行為進行研究。
  本系統還可利用統計分析的結果來對系統自身工作進行评估和調整。
  2.2 分析指標
  傳統圖書馆的分析指標和計量方法,雖然和數字化圖書馆有很多不同,但使用的目的及計量的準則並沒有太大實質性差异[4]。
  參考传統圖書館的分析指標以及國內外类似的研究結果選定了下列10個分析指標:
  (1)讀者到訪人數和潜在讀者人數的百分比;
  (2)到訪讀者表現了閱讀的興趣的百分比(采取明顯的阅讀行動);
  (3)可能的讀者轉为經常的讀者的百分比(經常閱读、下載資料);
  (4)讀者的持續度(重復到訪讀者);
  (5)讀者的忠誠度(網頁瀏覽次數、再度到訪的次數及時間長度);
  (6)读者停止閱讀行為的百分比(閱讀行为半途中止);
  (7)讀者耗損率(現有讀者中停止阅讀行為者的百分比);
  (8)讀者動摇率(耗損的讀者/到訪讀者的總數);
  (9)讀者最近到訪時间(據上次到訪的間隔時間);
  (10)讀者到訪頻率(多久到訪一次)。
  就此參數,我們可以從一個客觀的角度來觀察和評估圖書館網絡讀者訪問情況。
  2.3 系統框圖
 網絡讀者流量統計分析系統功能框圖
  2.4 工作方法
  本系統工作方法主要是采集網絡讀者訪問過程日誌進行量化分析法,它的優缺點見表1。
    讀者訪問過程日志分析法優缺點
  量化分析法重視量的分析,本系統通過對訪問過程日志以量的方法加以統計分析,首先根據為了研究讀者需求分布和需求增長情況這一目的将研究內容歸類成若幹分析單元,接著將分析單元以數量的方式加以表達,進而以此為解釋讀者信息尋求行為的依據。
  2.5 技術實現
  (1)系统結構
  本系統是以浏覽器/服務器/數據庫體系結构作為基本架構,通過ASP方式实現交互式、動態的读者訪問日誌統計分析系統。系统結構框架如圖2所示:
 讀者访問日誌統計分析系統結構框图
  (2)系統組成模塊
  本系統有六個模塊組成:訪問日誌入庫、訪問流量分析、被訪頁面分析、來訪讀者分析和統計分析圖表。
  (3)系統運行环境與開發平臺
  本系統運行環境和開發平臺如表2。

 讀者訪問日誌統计分析系統模塊
    表2 系統運行環境及開發平臺一覽表
軟件類別          軟件名稱
數據庫         SQL Server 2000+FastTrends Database
操作系統        Windows 2000 SP4 Server+Aix 4.3.3
Web服務器軟件      IIS 5.0+Apache 3.0
瀏覽器軟件       IE5.5
網頁制作        Frontpage2000+JavaScriPt
ASP工具         Editplus Text Editor
編程語言        Visual Basic 6.0
圖表軟件        Excel2000

  (4)程序流程與代碼實現
  該系统由main.asp(主界面程序)、flux.asp(小時、日、星期流量分析)、target.asp(被訪頁面分析)、visitor.asp(來訪讀者分析)、chart.asp(統計分析圖表)五個組成。
  我們以“被訪頁面分析”模塊的程序流程和代碼說明系統組成模塊的實現過程,該模塊程序流程圖如圖4。
“被訪頁面分析”程序流程圖
  相應代碼:
  <table
  <td class=定義的表格形式及表頭>
  Set conn=server.creatobjectl("adodb.connection")
  conn.open"dsn=dsn_dbs;uid=xxx;pwd=xxx"
  Set re=server.creatobject("adodb.recorderset")
  re.activeconnection=conn
  dbname=Application("logtime")——數據表名稱
  re.open“QL語句”
  do while not re.eof
  執行Recordset操作,服務器進行統計計算
  response.write——寫入統计表
  re.movenext
  loop
  re.close
  程序中一些代码說明:
  ①Recordset的Open方法:允許用戶向數據庫發出请求,通常是運行sql命令。如:Sqlquery="select logtime from intemetlog where day(logtime)=day(getdate())and month(logtime)=month(getdate())and year(logtime)=year(getdate())"Dbrs.open sqlquery,dbconnection,3,3
  ②Recordset的RecordCount屬性:可以取得當前在Recordset對象中的記錄條數。如:set dbrs=server.createobject("ADODB.recordset")amount=dbrs.recordcount
  ③Recordset的MoveNext方法:移動指針到Recordset對象的下一條數據。如:Dbrs.movenext
  ④Response的Write方法:负責將字符串信息輸出的用戶端。如:Response.write“頁面總訪问量:“& amount &”<br>
  ⑤Recordset的Close方法:可以用來關閉指定的Recordset對象。如:Dbrs.close
  2.6 系統運行過程
  下面以西安交通大學圖书館網站為統計分析對象说明該系統運行過程。
  首先我們用FTP工具抓取网址為http://www.lib.xjtu.edu.cn的服務器,時間段為2003/01/01到2003/12/31的訪问日誌導入到數據庫中,该服務器完成圖書館網站的部分功能:門戶信息、OPAC、館際互借、電子期刊、網絡數據庫、網絡資源、參考服務等。
  對日誌分析系統進行運行參數設置:读者訪問時間間隔設為20分钟;從最新QQ顯IP版軟件中導出读者IP地址分配資料,轉換格式後导入到日誌分析系統的地址表中,以便對讀者分群;設置過濾規格文件濾掉一些無用的訪問信息,如背景圖片、圖書馆Logo,頁面美化圖片和服務器漏洞掃描日誌等日誌信息,然後對服務器訪問日誌進行初步統計分析,保存統計分析結果準備進行進一步统計分析。
  最後利用精致多樣的統計分析方法對初步統計結果進行统計分析,統計分析出的數據有:一年內資源點擊與訪問計數;一年內網站中最常使用的資源與服務;一年內點擊次數最多的讀者;一年內務分群讀者的點擊次數比例;一年內點擊次數与閱讀次數的變化;一年內上網的讀者與累積成長趨势;一周各天的平均點擊次數;一天內各時段的平均點擊次數;校內各區读者點擊次數比例;各項相關資源被使用的情形等等。这些數據可用Eexel軟件生成直觀的統計分析圖表,部分圖表詳见實際應用一節中。本系統的研究主要采用訪問過程日誌分析法,以內容分析法、问卷調查法輔助研究。主要考慮:一是這種方法在電子商務和其它網絡應用的量化分析,已經有許多研究成果,可使我們的研究更為便利;二是可以經濟的,較具體客觀的分析到網絡讀者信息需求特性;三是通過定量的計算,定質的分析,形成一種綜合分析的方式,以求分析結果更為客觀和科學。

轉贴於 免費論文下載中心 http://www.hi138.com

    3 實際应用

  從2002年開始,我們從圖書馆門戶網站讀者訪問計數開始了網絡讀者訪問統計工作,從最初的圖書館首頁访問計數到現在應用網络讀者訪問流量統計分析系統到以信息資源發布站點、数據庫為單元的訪問利用上,取得了不少研究成果,下面我們介紹以2003年西安交通大學圖書館網站讀者訪問日誌為統計對象,获得的一些統計分析結果。
  表3是2003年圖書館網站的資源瀏覽次數,訪問次數與訪問读者數的統計表,我們看到一年內资源的瀏覽次數是10,222,296,訪問次數是1,617,166,訪問讀者是310,628,對照2003年西安交大統計公報教職工5341人,在校學生32766人的數據表明圖書館網站有很高的訪問量。另外網絡訪問讀者310,628遠遠大於學生和教職工的總和,表明有相當多的讀者使用本館的資源,這說明本館的信息資源豐富,吸引了很多讀者。網站不足之处是自建的外文資源很少。从表3看,來自國內訪問占6.43%,來自國外訪問占0.01%。綜合以上資料,西安交大圖書館網站為校內外讀者提供了方便、豐富的資源服務,吸引了大量的讀者,但在國外的知名度很低,現有資源不能吸引國外讀者,对此圖書館采取一些措施,来解決這個問題。
  ①建設網站的英文版本;
  ②把本校和本地一些有特色的文化資源數字化後,做成中英文全文数據庫。如錢學森多媒體數據庫、江南制造局多媒體數據庫;
  ③參與中外数據庫合作建設項目,如中美百萬圖書項目。
    表3 圖書館網絡讀者和資源瀏览訪問統計(01/01/2003-12/31/2003)
瀏览網頁數        網頁訪問數(資源)        10,222,296
            平均每日的訪問網頁數          28,006
訪問者會話數        訪問者會话數           1,617,166
            平均每日訪問者會話數           4,430
            國際範圍内的訪問者百分比         0.01%
            未知區域內的訪問者百分比        39.55%
            來自China的訪問者百分比         60.43%
訪問者數          單一訪問者數            310,628

  接著我們看一年間網絡讀者常使用的網站資源與服務,圖5顯示的是讀者最常使用的前十项網站資源與服務以及它們占全部瀏覽次數的百分比。從图中我們觀察到前十項占了訪問量的43%,第一項是圖书館首頁,然後依次是網絡數據庫、聯機公共目錄查詢、中國期刊網……,這說明圖書館網站的資源內容設計與規劃合理,讀者訪問资源方便,相關信息更新及時,受到了讀者的歡迎。另外,網絡数據庫和聯機公共目錄访問比例接近說明讀者并重利用印刷型資源和数宇化資源,數字化資源對科研和教學的作用日益明顯。從圖5中我們還觀察到所有的電子數據庫訪問所占比例值呈现出指數下降的趨勢,這說明较少數數據庫的訪問量较大,而較多數數據庫訪問量較少,根據這個特點,圖書館在采購數據庫時可采取不同的采購策略,對於使用量大的數據庫保證數據的更新量和連續性,則可满足約80%的讀者信息需求,對於較多的使用量少的數據庫可采用合夥采购共同使用的辦法,來滿足约20%的讀者信息需求。
 圖書館網站前十名資源與服務以及它們占全部訪問次數的比例(01/01/2003-12/31/2003)
  接下來我們來分析常訪問的讀者及其來源,首先,图6中表示網絡讀者訪問次數的分布,從圖6中可以看出75.15%的讀者只訪問過一次,9.86%的讀者访問過兩次,6.49%的讀者則經常訪問圖書館網站,這說明作為一个為大學教育和科研服務的信息中心,圖書館的網絡資源已經有了固定的讀者,但還有大量读者的信息需求不能滿足,為此圖書館通過參加一些文獻信息資源建設項目和組织,如中國高等教育文獻保障體系(CALIS),陕西省科技情報協作網等,以便獲取更多優質的文獻信息資源,增強圖书館文獻信息資源的保障能力。另外,圖書館信息資源大多數有訪問權的限制,校外的讀者無法接觸到,為此图書館采取了一些辦法,如建立電子數據庫導航庫,电子期刊導航庫,提供文獻传遞等服務來滿足校外讀者的信息需求。表4是常來圖書馆網站的讀者統計數據,可以觀察到前二十名讀者絕大部分是西安交大校園網的讀者占全部來訪數的4.61%。如果以其上網所屬機構來劃分来訪的網絡讀者,圖7是前十名各類機構網絡读者的訪問。從圖7中,我們可以清楚的看到本校的用户占73%,其中來自科學館的訪問占3.23%,圖書館的讀者占3.18%,西一樓的2.34%,可見西安交大的校園網比較普及,讀者能夠很方便的進入圖書館資源網站,這也表示圖书館提供給讀者閱讀電子资源的電子閱覽室滿足了讀者需要。在圖7中數據顯示,外校的讀者也經常訪問圖書館網站,如西安理工大學的讀者占0.33%,長安大學的占0.31%,北京大學的占0.05%,西北工業大學的占0.17%,上海交大占0.08%等等,這些讀者主要使用聯機公共目錄查詢和使用自建數據庫,這說明高校間的信息共享正在發展,圖書馆應該加強自建特色數據庫的建設,增強文獻傳遞和館際互借服務,滿足這些讀者的信息需求。
    表4 訪問圖書館網站次數最多的前20名讀者及他們占的比例(01/01/2003-12/31/2003)            
網絡讀者訪問統计
    訪問者       點擊數     点擊率    訪問者会話數
1   202.117.14.71     293,444     0.54%        2,893
2   202.117.14.15     112,249     0.2%        2,846
3   202.117.29.37     347,223     0.64%        2,554
4   202.117.0.9      80.700     0.15%        2,487
5   202.117.29.59     121,184     0.22%        2,427
6   202.117.39.47     114,629     0.21%        2,290
7   202.117.48.45     174,130     0.32%        2,120
8   202.117.14.24     147,500     0.27%        1,997
9   202.117.35.11     56,312     0.1%        1,985
10  202.117.48.51     96,210     0.17%        1,839
11  202.117.35.79     223,565     0.41%        1,792
12  202.117.48.101    107,631     0.2%        1,785
13  202.117.48.103    110,180     0.2%        1,775
14  202.117.24.84     14,652     0.02%        1,764
15  202.117.48.44     92,776     0.17%        1,726
16  202.117.29.58     121,756     0.22%        1,678
17   64.241.242.18     2,131      0%         1,673
18  202.117.48.77     51,682     0.09%        1,654
19  202.117.29.136    103,924     0.19%        1,623
20  202.117.27.13     109,429     0.2%        1,605
以上訪問者合计      2,481,207     4.61%       40,513
  總數         53,733,901      100%      1,617,166

接下來我們來觀察各類讀者在每個月访問網絡資源的比例變化圖,见圖8是各類網絡讀者访問前十名網絡資源的变化圖,總體訪問變化的趨勢和學校的校歷安排有明顯的关系,每個數據庫的访問量變化則和各類读者的信息需求不同有關系。这反映了讀者的結構影響著網站的使用情形。
   網絡读者訪問圖書館網站次数分布(01/01/2003-12/31/2003)
   前十名各類主機訪問圖书館網站的訪問次數(01/01/2003-12/31/2003)
  各類網絡讀者對前十名網絡資源訪問變化图(01/01/2003-12/31/2003)
  由于篇幅有限,我們簡單介紹了本系统對圖書館網站網絡讀者访問流量的統計分析结果,在以上的討論中,可以觀察到讀者利用網絡信息資源是联機公共目錄檢索和信息檢索並重,且大部分讀者是本校的。
  通過上述討論,我們知道本系統還有许多值得進一步研究之處,下一步的研究方向是收集更完整的讀者訪問日誌,包括更長期的和所有與圖書館資源访問相關的。並且嘗試利用精致的統計方法來分析,以達到對网絡讀者行為更精確的解讀。

    4 結語

  经實際應用證明,該系统對我館信息資源建設起到了重要的促進作用。首先,在控制我館信息資源存放空間問题上,雖然目前看來效果不明顯,但如果越來越多的信息資源雜亂無章地占据信息空間,將會大大降低信息檢索的效率,幹擾核心信息源的利用。本系統可以提供調整信息存放的定量依據,在探明各類型信息資料數量特征的基礎上,分析其增長和老化規律,判斷信息的价值和時效性,使有價值的信息充分地發揮作用,使信息空間得到有效的利用。
  其次,在“以人為本”的理念指導下,圖書館走出了單純提供館藏信息資源為中心的定位,著眼於滿足讀者广泛的信息需求。在本系統的指導下能實現這個目標:一是根據信息資源規律反映出的學術動態和信息利用規律反映出的需求动態,指導圖書館的館藏資源建設。二是通過對信息資源利用規律的研究,使計算機信息檢索系統走向科學化、規範化,從而方便用戶查詢。
  在整個研究過程中,取得了一些研究成果,也发現有不少問題等待我們进一步的研究,首先是無法取得确實充分的數據,主要問題是圖書館提供的網絡數據庫是聯接到廠商的數据庫中去檢索的。如果图書館自己沒有服務主机,那麽就要請廠商提供訪問數據,雖然廠商都會提供月报表,但是能夠判讀的資料不多,或是他提供的數據不標準,或是他提供資料不是圖書館想要的。其次不易解釋數据,有了訪問過程記錄數據,可是怎麽去解釋它?讀者從哪裏來,做什麽,這個比較容易解释,可是要知道讀者做某件事的動機,就沒有辦法從數據中去解釋了。

【參考文獻】
  1 Wonsik Shim,Charles R.McClure,John Carlo Bertot & James T.Sweet.ARL E—Metrics Project:Developing Statistics and Performance Measures to DescribeElectronic Information Services and Resources for ARL Libraries:Phase One ReportTallahassee,FL:Information Use Management and Policy Institutc,School oflnformation Studies,2000.http://www.arl.org/stats/newmeas/emetrics/phaseone.pdf(Accessed Sep.10.2001)
  2 詹麗萍.E-metrics在數字圖書館使用評估的應用.數字圖書館与數字博物館趨勢研討會,2001:21-30
  3 鄒菲.試论網絡信息計量學在數字圖書館中的应用.圖書情報知識,2001(1):16-20
  4 邱均平.信息計量學(一).情報理論與实踐,2000(1):75-80
  5 徐潤萍,谷寧昌.利用ASP建立基於Web的MIS系統技術實現方法.計算機工程,2002(28):254-256

免費論文下載中心 http://www.hi138.com
下载论文

論文《網絡讀者訪問流量統計分析系統的研究與實現》其它版本

統計學論文服務

網站聲明 | 聯系我們 | 網站地圖 | 論文下載地址 | 代寫論文 | 作者搜索 | 英文版 | 手機版 CopyRight@2008 - 2017 免費論文下載中心 京ICP备17062730号