前言：想要寫出一篇令人眼前一亮的文章嗎？我們特意為您整理了5篇數(shù)據(jù)清洗范文，相信會為您的寫作帶來幫助，發(fā)現(xiàn)更多的寫作思路和靈感。

數(shù)據(jù)清洗范文第1篇

1、擠點(diǎn)牙膏涂上，數(shù)據(jù)線輕輕的擦幾下，用水沖一沖或者拿濕毛巾擦一下即可?；蛘哂没瘖y棉潤濕一下，反復(fù)擦拭幾遍數(shù)據(jù)線也可以了。不能用強(qiáng)腐蝕性清潔用品，擦拭的毛巾或紙不可太粗糙且擦拭數(shù)據(jù)線的時候不要太過用力。

2、數(shù)據(jù)線，是連接硬盤與主板必需的組件，通常會在購買主板時附送。每條數(shù)據(jù)線只能連接兩個IDE裝置(比如光驅(qū)、硬盤、刻錄機(jī)等)。

（來源：文章屋網(wǎng) ）

數(shù)據(jù)清洗范文第2篇

關(guān)鍵詞：RFID數(shù)據(jù)清洗；SMURF；自適應(yīng)窗口；躍遷檢測；

中圖分類號：TP311 文獻(xiàn)標(biāo)識碼：A 文章編號：1009-3044（2016）15-0237-04

Abstract：In the process of RFID application， the adaptive window algorithm based on SMURF can greatly improve the effect of data cleaning compared to static window algorithm， but the algorithm does not consider the dynamic mobile environment between tags and reader， if the reader missing the tags， the transition detection mechanism of this method will cause the cleaning window size can not reasonably and adaptively regulate， also will produce lots of false negative； In view of the above problems， this paper put forward the improvement based on the original algorithm， the average divideinto sub-windows of number one and sub-window of number two， use the observed valuein the number two of tagand the observed probabilitiesin the windowas the tag transition conditions， improved the tag’s transition detection accuracy of the original algorithm， and more effective to realize mobile single tag data cleaning. By experimental verification： In the mobile environment， the improved algorithm have better cleaning effect than SMURF.

Key words：RFID data cleaning； SMURF； adaptive window； transition detection

1 引言

射頻識別 （Radio Frequency Identification，RFID）技術(shù)是利用射頻通信原理實現(xiàn)非接觸式的自動識別技術(shù)。在實際應(yīng)用過程中，閱讀器在其閱讀范圍內(nèi)一旦識別到帶有標(biāo)簽的物品經(jīng)過時，就會自動且無接觸的從標(biāo)簽中獲取相應(yīng)信息，識別物品或者實現(xiàn)自動收集物品信息的功能。目前阻礙RFID技術(shù)廣泛應(yīng)用的主要原因之一，就是原始數(shù)據(jù)獲取的不準(zhǔn)確，有時準(zhǔn)確率僅為60%～70%，即閱讀器漏讀了30%～40%的數(shù)據(jù)[1]。 為了有效地支持RFID上層業(yè)務(wù)的邏輯處理，目前普遍采用的方法就是清洗原始數(shù)據(jù)。

在RFID應(yīng)用過程的數(shù)據(jù)清洗技術(shù)中，有三種有效的方法可以提高RFID數(shù)據(jù)可靠性：硬件解決方案、中間件解決方案以及存儲器解決方案。硬件解決方案著重提升包括閱讀器和標(biāo)簽設(shè)備在內(nèi)的硬件性能，如使用多個標(biāo)簽和閱讀器來準(zhǔn)確獲取同一個物品的物理信息[2-4]。中間件解決方案主要在RFID原始數(shù)據(jù)未進(jìn)入到數(shù)據(jù)庫[5-7]之前，使用各種清洗算法對RFID原始數(shù)據(jù)進(jìn)行清洗，從而到達(dá)數(shù)據(jù)可靠。而存儲器解決方案是在數(shù)據(jù)存儲過程中采用智能化控制技術(shù)對RFID不可靠數(shù)據(jù)進(jìn)行修正[8-9]?；谥虚g件解決方案的簡單與實用性，這一種解決方案已經(jīng)成為保證RFID數(shù)據(jù)可靠性的主要研究熱點(diǎn)，比較典型的方法有基于靜態(tài)滑動窗口清洗方法和基于管道RFID數(shù)據(jù)清洗模型ESP。

對于靜態(tài)窗口清洗方法[10]，這種清洗方式簡單易行，但是錯誤率較高，在標(biāo)簽移動過程中固定的滑動窗口不會在系統(tǒng)的整個生命周期保持有效；管道RFID數(shù)據(jù)清洗模型[11]其在絕大多數(shù)的RFID應(yīng)用系統(tǒng)中，都能有效處理冗余數(shù)據(jù)和大部分的錯誤數(shù)據(jù)，但不能理想的動態(tài)性追蹤標(biāo)簽；而Jeffery等人為了解決管道RFID數(shù)據(jù)清洗模型中所選時間粒度（即清洗窗口大小）的不恰當(dāng)，造成更多的積極讀錯誤（閱讀器認(rèn)為已經(jīng)離開閱讀范圍的標(biāo)簽仍然在其閱讀范圍之內(nèi)）或消極讀錯誤（標(biāo)簽沒有離開閱讀范圍，但是被誤解為已經(jīng)出了閱讀器的閱讀范圍）的問題，提出統(tǒng)計平滑處理方法SMURF[12]，該方法的窗口大小隨著系統(tǒng)生命周期中RFID觀測數(shù)據(jù)的改變，從而自適應(yīng)調(diào)整；但是該方法忽略了單標(biāo)簽的空間粒度多變環(huán)境，當(dāng)閱讀器在動態(tài)移動中發(fā)生漏讀，方法中的躍遷檢測機(jī)制不能合理調(diào)整清洗窗口的自適應(yīng)大小，并且使消極讀錯誤大量產(chǎn)生。

本文對RFID數(shù)據(jù)清洗技術(shù)進(jìn)行了深入研究，針對基于統(tǒng)計平滑處理（SMURF）的RFID數(shù)據(jù)清洗算法沒有充分考慮到閱讀器在其與標(biāo)簽的動態(tài)移動環(huán)境下發(fā)生漏讀現(xiàn)象時，該算法中的躍遷檢測機(jī)制不能合理使清洗窗口大小自適應(yīng)調(diào)整，從而導(dǎo)致消極讀錯誤大量產(chǎn)生的問題，提出把清洗窗口平均分成子窗口1和子窗口2，將個閱讀周期內(nèi)在窗口中觀測到標(biāo)簽的概率差值以及在子窗口2中標(biāo)簽被觀測到的值作為判斷標(biāo)簽是否發(fā)生躍遷的條件，使原算法中的躍遷檢測準(zhǔn)確度提高。

2 基于統(tǒng)計樣本的RFID數(shù)據(jù)流建模

本文提到的標(biāo)簽躍遷是指標(biāo)簽從閱讀器閱讀范圍之內(nèi)移動到閱讀器范圍之外后，RFID實際理想數(shù)據(jù)中的空白部分（見圖1）。

在典型的RFID中間件解決方案中通常采用平滑窗口來清洗RFID數(shù)據(jù)流，但是窗口大小的調(diào)整需滿足以下兩種對立的應(yīng)用要求：標(biāo)簽閱讀的完整性和獲取標(biāo)簽的動態(tài)變化。如圖1所示。

（1）完整性（Completeness）：由于小窗口的清洗容易產(chǎn)生消極讀，丟失某些標(biāo)簽信息。因此必須保證有足夠大的清洗窗口，能夠在閱讀器閱讀范圍內(nèi)有效的讀取到所有標(biāo)簽的信息，避免數(shù)據(jù)丟失。當(dāng)然，周圍環(huán)境、標(biāo)簽的種類以及閱讀器的種類和閱讀率都會影響窗口的大小，從而影響閱讀器讀取數(shù)據(jù)的完整性。

（2）標(biāo)簽動態(tài)性（Tag Dynamics）：大窗口清洗雖然可以避免產(chǎn)生消極讀錯誤，但同樣不可避免的會出現(xiàn)閱讀器錯誤的認(rèn)為已經(jīng)遠(yuǎn)離其閱讀范圍的標(biāo)簽仍存在于讀取范圍內(nèi)，導(dǎo)致積極讀錯誤產(chǎn)生。最糟糕的是，某些標(biāo)簽在離開閱讀范圍后又被放回閱讀區(qū)間，但是由于窗口過大，閱讀器無法正確判斷標(biāo)簽的真實移動，從而在標(biāo)簽移動狀態(tài)檢測上出現(xiàn)問題。為了保證標(biāo)簽的動態(tài)性，我們需要了解標(biāo)簽的移動特點(diǎn)和應(yīng)用領(lǐng)域。

在RFID應(yīng)用過程中，當(dāng)被附著標(biāo)簽的對象進(jìn)入閱讀器的閱讀范圍內(nèi)時，就會產(chǎn)生一個RFID信息，但是標(biāo)簽與閱讀器之間的動態(tài)移動環(huán)境下，閱讀器讀取的標(biāo)簽信息并不能保證連續(xù)；同時，標(biāo)簽與閱讀器之間的距離也影響到標(biāo)簽被讀取的概率，由于距離限制了閱讀器發(fā)射的射頻信號，所以標(biāo)簽想要被讀取就要離閱讀器近，反之離閱讀器的閱讀范圍越遠(yuǎn)的標(biāo)簽就難以被成功讀取到。因此基于統(tǒng)計平滑處理（SMURF）的RFID數(shù)據(jù)清洗算法對抽象的統(tǒng)計樣本（閱讀器讀取的RFID數(shù)據(jù)信息）進(jìn)行建模，利用樣本理論，根據(jù)RFID數(shù)據(jù)的觀測值驅(qū)動滑動窗口在系統(tǒng)的整個生命周期內(nèi)，都能夠連續(xù)地自適應(yīng)調(diào)整自己的大小。

查詢周期是單標(biāo)簽情況下，RFID閱讀器與標(biāo)簽通信的基本時間單位，它包括兩部分： 閱讀器將射頻信號發(fā)送給標(biāo)簽、標(biāo)簽接受到信號后發(fā)送應(yīng)答給閱讀器。為了增加RFID數(shù)據(jù)的可靠性，通常一個閱讀周期由多個查詢周期組成。用表示單位閱讀周期，。

一個閱讀周期內(nèi)閱讀器能讀到的標(biāo)簽總數(shù)用表示，而一個閱讀周期內(nèi)被成功讀取的標(biāo)簽數(shù)用表示，則一個閱讀周期內(nèi)標(biāo)簽的讀取概率即為：

但是當(dāng)標(biāo)簽信息漏讀現(xiàn)象，發(fā)生在閱讀器閱讀范圍之內(nèi)的標(biāo)簽相對閱讀器動態(tài)移動時（圖3藍(lán)線區(qū)間），也會使窗口條件滿足情況1條件。這樣就會使原算法錯誤地認(rèn)為標(biāo)簽信號在當(dāng)前窗口內(nèi)發(fā)生了躍遷，而過大的窗口調(diào)整會產(chǎn)生更多的消極讀。

針對情況1，本文提出規(guī)則1對當(dāng)前清洗窗口大小進(jìn)行適度調(diào)整，以滿足清洗要求。

規(guī)則1：當(dāng)且滿足式（4）時，調(diào)整當(dāng)前清洗窗口為；

情況2：改進(jìn)算法為了更加準(zhǔn)確的實現(xiàn)標(biāo)簽信號躍遷檢測，提出規(guī)則2，引入窗口內(nèi)個閱讀周期觀測到標(biāo)簽的概率差值和作為標(biāo)簽是否處于閱讀器閱讀范圍之內(nèi)的判斷條件。

規(guī)則2：當(dāng)在窗口內(nèi)且，調(diào)整當(dāng)前清洗窗口調(diào)整為原窗口的，也就是。

3.2 算法實現(xiàn)

為了減少RFID數(shù)據(jù)出現(xiàn)的積極讀錯誤，同時平衡清洗窗口的平滑性，設(shè)置一個閱讀周期為滑動窗口每次向前滑動的距離，為最小的清洗窗口值。將清洗窗口的中間時間節(jié)點(diǎn)作為標(biāo)準(zhǔn)，若滑動窗口內(nèi)的數(shù)據(jù)在一個閱讀周期內(nèi)滿足輸出條件，即可輸出數(shù)據(jù)。單個標(biāo)簽的改進(jìn)算法如表1所示。

4 實驗驗證

測試環(huán)境如圖4所示：

測試環(huán)境平臺和軟件：

測試平臺：Microsoft Visual Studio 2010

數(shù)據(jù)庫工具：Microsoft SQL Server 2008

數(shù)據(jù)生成的語言：C#

串口參數(shù)：

波特率：9600

數(shù)據(jù)位：8位

停止位：1位

校驗位：無

現(xiàn)有的RFID數(shù)據(jù)清洗技術(shù)廣泛采用模擬數(shù)據(jù)進(jìn)行實驗分析，為了驗證本文所提出的改進(jìn)算法，現(xiàn)數(shù)據(jù)模擬場景如下：固定一個閱讀半徑4.6m，最大閱讀率為95%的閱讀器，讓單標(biāo)簽在閱讀器閱讀范圍內(nèi)外的任意位置以隨機(jī)速度（）變化移動。根據(jù)模擬場景，當(dāng)有符合條件的數(shù)據(jù)（圖6中RFID原數(shù)據(jù)）PC1就會自動生成并且儲存在自己的數(shù)據(jù)庫表格中。

由于一個閱讀周期中還包含標(biāo)簽給閱讀器的應(yīng)答，因此每隔一個周期PC2會得到一條由PC1從數(shù)據(jù)庫中通過串口發(fā)送的標(biāo)簽數(shù)據(jù)，PC2會執(zhí)行完整性置信度的清洗算法，處理得到的標(biāo)簽數(shù)據(jù)，保存記錄最終數(shù)據(jù)以作分析。簡單構(gòu)建標(biāo)簽信息數(shù)據(jù)格式如圖5所示，以模擬閱讀器有無讀取到隨機(jī)速度的標(biāo)簽：

B1位：標(biāo)簽未被讀取即為0，標(biāo)簽被讀取即為1；A1～A7：標(biāo)簽的移動速度，0～90隨機(jī)數(shù)。

由圖6可知，當(dāng)標(biāo)簽在閱讀器閱讀范圍內(nèi)動態(tài)移動而發(fā)生閱讀器漏讀標(biāo)簽信息時，改進(jìn)算法能夠更加合理的使清洗窗口大小自適應(yīng)調(diào)整，從而使得清洗的數(shù)據(jù)更加接近實際理想數(shù)據(jù)，并且能夠更準(zhǔn)確地動態(tài)判斷標(biāo)簽信號躍遷檢測。這種與實際數(shù)據(jù)相比，清洗效果明顯優(yōu)于SMURF原算法的改進(jìn)算法在性能上整體實現(xiàn)了提升。

由圖7可知，相較于SMURF原算法，改進(jìn)算法在標(biāo)簽以隨機(jī)速度變化移動過程中，減少了積極讀錯誤的產(chǎn)生；但是卻增加了消極讀錯誤，因為改進(jìn)算法中進(jìn)行數(shù)據(jù)處理的清洗窗口會比原算法的小，因而標(biāo)簽躍遷檢測機(jī)制檢測不到清洗窗口。

5 結(jié)論

本文分析比較了幾種經(jīng)典的數(shù)據(jù)清洗技術(shù)，并且對基于統(tǒng)計平滑處理的RFID數(shù)據(jù)清洗技術(shù)進(jìn)行了深入研究，針對閱讀器在動態(tài)移動環(huán)境下發(fā)生標(biāo)簽信息漏讀現(xiàn)象，該算法中的躍遷檢測機(jī)制不能合理使清洗窗口大小自適應(yīng)調(diào)整，導(dǎo)致消極讀錯誤大量產(chǎn)生；為此，本文提出改進(jìn)算法，利用個閱讀周期內(nèi)在窗口觀測到標(biāo)簽的概率差值和子窗口2中標(biāo)簽被觀測到的值作為判斷標(biāo)簽發(fā)生躍遷的條件。經(jīng)實驗驗證，改進(jìn)算法使得動態(tài)標(biāo)簽躍遷檢測的準(zhǔn)確度提高，但是改進(jìn)算法過小的清洗窗口，也將引入一定程度的消極讀錯誤，這個問題有待進(jìn)一步研究解決。

參考文獻(xiàn)：

[1]谷峪，于戈，張?zhí)斐?RFID復(fù)雜事件處理技術(shù)[J].計算機(jī)科學(xué)與探索，2007，I（2）：255-267.

[2] M. S. Trotter and G. D. Durgin.Survey of Range Improvement of Commercial RFID Tags with Power Optimized Waveforms[C].IEEE International Conference on RFID， April 2010：195-202.

[3] A. Rahmati， L. Zhong， M. Hiltunen， and R. Jana.Reliability Techniques for RFID-Based Object Tracking Applications[C]/.Proceedings of the 37th Annual IEEE/IFIP International Conference on Dependable Systems and Networks （DSN ’07）. IEEE Computer Society， 2007：113C118.

[4] H. Chen， W. Ku， H. Wang and M. Sun.Leveraging spatio-temporal redundancy for RFID data cleansing[C]/.Proceedings of the 2010 international conference on Management of data， SIGMOD '10， 2010.

[5] S.R. Jeffery， M. Garofalakis， and M.J.Franklin.Adaptive cleaning for RFID data streams[C]// Proceedings of the 32nd international conference on Very large data bases ， VLDB Endowment， 2006：163-174.

[6] H. Gonzalez， J. Han， and X. Shen.Cost-conscious cleaning of massive RFID data sets[C]/.Proc. 2007 Int. Conf. on Data Engineering （ICDE'06）， Istanbul， Turkey， April 2007.

[7] B. Song， P. Qin， H. Wang， W. Xuan， G. Yu，.bSpace： A data cleaning approach for RFID data streams based on virtual spatial granularity[J].Proceedings of HIS， 2009 （3）：252-256.

[8] P. Darcy， B.Stantic and A.Sattar.A Fusion of Data Analysis and Non-Monotonic Reasoning to Restore Missed RFID Readings[J].Proceedings of Intelligent Sensors， Sensor Networks and Information Processing （ISSNIP 2009）， 2009：313-318.

[9] J. Rao， S. Doraiswamy， H. Thakkar and L. S. Colby. A Deferred Cleansing Method for RFID Data Analytics[C].VLDB， 2006.

[10] E.Rahm and H.Do.Data cleaning：Problems and current approaches[J] .IEEE Data Eng.Bull， 200023（4）：3-13.

數(shù)據(jù)清洗范文第3篇

關(guān)鍵詞：支付清算 數(shù)據(jù)分析 實現(xiàn)

一、前言

近年來，為適應(yīng)社會主義市場經(jīng)濟(jì)發(fā)展的要求，人民銀行加快了支付清算體系的建設(shè)步伐，已基本建成了以人民銀行現(xiàn)代化支付系統(tǒng)為核心，銀行業(yè)金融機(jī)構(gòu)行內(nèi)系統(tǒng)為基礎(chǔ)，票據(jù)支付系統(tǒng)、銀行卡支付系統(tǒng)為重要組成部分的支付清算網(wǎng)絡(luò)系統(tǒng)，為經(jīng)濟(jì)金融和社會發(fā)展提供了快速高效、安全可靠地支付清算渠道。

隨著支付清算體系的完善，大量跨銀行跨區(qū)域的資金通過人民銀行搭建的清算平臺進(jìn)行流轉(zhuǎn)。目前人民銀行支付清算系統(tǒng)包括了大額支付系統(tǒng)、小額支付系統(tǒng)、支票影像交換系統(tǒng)、境內(nèi)外幣支付系統(tǒng)、電子商業(yè)匯票系統(tǒng)、網(wǎng)上支付跨行清算系統(tǒng)6大核心業(yè)務(wù)系統(tǒng)，為商業(yè)銀行之間和商業(yè)銀行與人民銀行之間的支付業(yè)務(wù)提供最終資金清算功能，是銀行資金匯劃與資金清算的重要平臺和核心樞紐，也是金融市場的核心支持系統(tǒng)，為經(jīng)濟(jì)的發(fā)展發(fā)揮了重要作用。2011年，湖南省支付清算系統(tǒng)處理往來業(yè)務(wù)4,786萬筆，日均19萬筆，同比增長36%，交易金額32萬億元，日均1,280億元，同比增長14%。支付清算系統(tǒng)已經(jīng)成為湖南省資金匯劃和資金清算的重要平臺和核心樞紐，包含了全省主要支付清算業(yè)務(wù)數(shù)據(jù)，有豐富的數(shù)據(jù)資源值得挖掘分析。

二、支付清算業(yè)務(wù)數(shù)據(jù)分析系統(tǒng)概述

支付清算業(yè)務(wù)數(shù)據(jù)分析系統(tǒng)是中國人民銀行長沙中心支行開發(fā)建設(shè)的，實現(xiàn)支付清算系統(tǒng)業(yè)務(wù)數(shù)據(jù)深度挖掘和分析研究的數(shù)據(jù)分析系統(tǒng)。該系統(tǒng)采集、積累支付清算系統(tǒng)業(yè)務(wù)數(shù)據(jù)，形成全面、完整、歷史的業(yè)務(wù)數(shù)據(jù)庫，實現(xiàn)數(shù)據(jù)資源有效管理和綜合利用。系統(tǒng)可對支付清算業(yè)務(wù)數(shù)據(jù)信息進(jìn)行各種分析，通過篩選重要業(yè)務(wù)信息，對熱點(diǎn)問題進(jìn)行深度挖掘和延伸分析，開展專題調(diào)研，建立研究模型，形成分析報告，為人民銀行在宏觀金融經(jīng)濟(jì)決策方面提供有高度實用強(qiáng)的分析依據(jù)。

高效處理原則。數(shù)據(jù)分析系統(tǒng)的顯著特點(diǎn)是需采集、管理、統(tǒng)計分析海量的支付系統(tǒng)業(yè)務(wù)數(shù)據(jù)，系統(tǒng)處理壓力很大，要設(shè)計合理的分類方法和分析模型，采取必要的技術(shù)手段增強(qiáng)系統(tǒng)的處理能力，最大限度地發(fā)揮系統(tǒng)潛能，確保系統(tǒng)對信息的高效處理，完成對數(shù)據(jù)的有效利用。

前瞻性原則。系統(tǒng)建設(shè)應(yīng)根據(jù)當(dāng)前業(yè)務(wù)需求的迫切性及未來發(fā)展的趨勢，統(tǒng)籌規(guī)劃處理的業(yè)務(wù)及其相應(yīng)的功能。應(yīng)用設(shè)計應(yīng)具有前瞻性、靈活性和通用性，采用開放的系統(tǒng)平臺、數(shù)據(jù)庫產(chǎn)品、靈活的統(tǒng)計分析工具、模塊化的結(jié)構(gòu)，新增、更換系統(tǒng)模塊或者未來支付系統(tǒng)數(shù)據(jù)集中不對應(yīng)用系統(tǒng)已有的架構(gòu)造成影響。系統(tǒng)架構(gòu)應(yīng)該具有靈活的擴(kuò)展性，可以滿足未來業(yè)務(wù)發(fā)展與技術(shù)進(jìn)步對系統(tǒng)擴(kuò)充的要求。

標(biāo)準(zhǔn)化規(guī)范化原則。數(shù)據(jù)分析系統(tǒng)的建設(shè)，必須統(tǒng)一數(shù)據(jù)劃分標(biāo)準(zhǔn)，對于數(shù)據(jù)的各個項目要按照國家統(tǒng)計標(biāo)準(zhǔn)進(jìn)行分類，以便于之后數(shù)據(jù)統(tǒng)計的準(zhǔn)確性?？紤]到系統(tǒng)以后良好的拓展性也要按照國家標(biāo)準(zhǔn)統(tǒng)一分類，保證今后易于拓展與別的系統(tǒng)相連。

安全性原則。數(shù)據(jù)分析系統(tǒng)處理的數(shù)據(jù)是反映經(jīng)濟(jì)金融活動的敏感數(shù)據(jù)，應(yīng)提供完備的安全機(jī)制，確保系統(tǒng)安全、可靠、穩(wěn)定地運(yùn)行，防止業(yè)務(wù)數(shù)據(jù)被非法訪問、篡改與竊取。系統(tǒng)應(yīng)建立完備的審計與跟蹤機(jī)制，對系統(tǒng)重要事件進(jìn)行記錄，便于日常管理、故障處理和事后稽查。

三、支付清算業(yè)務(wù)數(shù)據(jù)分析系統(tǒng)架構(gòu)

數(shù)據(jù)分析系統(tǒng)采用多層、可擴(kuò)展框架結(jié)構(gòu)，整體上包括數(shù)據(jù)采集、數(shù)據(jù)管理和應(yīng)用服務(wù)三個部分。其中數(shù)據(jù)采集包括：數(shù)據(jù)源、數(shù)據(jù)采集和傳輸；數(shù)據(jù)管理部分主要統(tǒng)一存放支付系統(tǒng)等相關(guān)業(yè)務(wù)數(shù)據(jù)；應(yīng)用服務(wù)部分包括：數(shù)據(jù)查詢、統(tǒng)計報表和安全管理。

數(shù)據(jù)采集應(yīng)用主要包括數(shù)據(jù)采集模塊和數(shù)據(jù)傳輸模塊。數(shù)據(jù)采集平臺的功能是統(tǒng)一從大額支付系統(tǒng)和小額支付系統(tǒng)采集支付業(yè)務(wù)統(tǒng)計分析所需要的各種基礎(chǔ)數(shù)據(jù)，并進(jìn)行數(shù)據(jù)正確性檢驗，采集后數(shù)據(jù)統(tǒng)一存入數(shù)據(jù)庫中。數(shù)據(jù)庫存儲和管理歷史詳細(xì)的各種業(yè)務(wù)資料和匯總統(tǒng)計數(shù)據(jù)，是統(tǒng)一的支付統(tǒng)計分析數(shù)據(jù)平臺，為訪問用戶提供數(shù)據(jù)服務(wù)。數(shù)據(jù)庫層還部署有數(shù)據(jù)管理應(yīng)用模塊，主要負(fù)責(zé)數(shù)據(jù)模型和業(yè)務(wù)數(shù)據(jù)的管理。統(tǒng)計分析應(yīng)用主要包括：數(shù)據(jù)查詢模塊、統(tǒng)計報表模塊和安全管理模塊。統(tǒng)計分析應(yīng)用層根據(jù)業(yè)務(wù)的需要，以模塊化的方式，提供歷史數(shù)據(jù)查詢、統(tǒng)計報表展現(xiàn)和安全及用戶管理等服務(wù)，并能根據(jù)業(yè)務(wù)發(fā)展的需要，在未來方便的加入新的應(yīng)用模塊。Web服務(wù)接受用戶提交的訪問請求并提交到應(yīng)用服務(wù)層，為數(shù)據(jù)分析系統(tǒng)應(yīng)用提供統(tǒng)一的訪問接口。用戶訪問采用基于Web的B/S架構(gòu)，為用戶提供了方便的訪問服務(wù)，有利于系統(tǒng)的實施和維護(hù)。

系統(tǒng)采用最典型的三層架構(gòu)進(jìn)行開發(fā)，用數(shù)據(jù)庫作存儲層，用面向?qū)ο髞韺崿F(xiàn)業(yè)務(wù)層，用web來作為用戶接口層。數(shù)據(jù)分析系統(tǒng)主體擬采用J2EE體系進(jìn)行開發(fā)，通過提供統(tǒng)一的開發(fā)平臺，J2EE降低了開發(fā)多層應(yīng)用的費(fèi)用和復(fù)雜性，同時提供對現(xiàn)有應(yīng)用程序集成強(qiáng)有力支持，完全支持Enterprise JavaBeans，有良好的向?qū)еС执虬筒渴饝?yīng)用，添加目錄支持，增強(qiáng)了安全機(jī)制，提高了性能，具體架構(gòu)如下圖所示：

在存儲層，使用的是ORACLE數(shù)據(jù)庫，Hibernate是一個開放源代碼的對象關(guān)系映射框架，它對JDBC進(jìn)行了非常輕量級的對象封裝。在業(yè)務(wù)層，因為當(dāng)前業(yè)務(wù)有變動且數(shù)據(jù)量巨大，所以在標(biāo)準(zhǔn)J2EE系統(tǒng)中，使用了spring這樣一個bean配置的輕量級架構(gòu)，對業(yè)務(wù)架構(gòu)影響小。在用戶接口層，Servlet、Jsp、javaBean和structs均能夠作為架構(gòu)來應(yīng)用。Struts采用基于事件的方式，并混合使用Servlets和Jsp，則可以建立可擴(kuò)展的應(yīng)用，使其作為用戶接口層基礎(chǔ)架構(gòu)。

四、支付清算業(yè)務(wù)數(shù)據(jù)分析系統(tǒng)功能實現(xiàn)

支付清算業(yè)務(wù)數(shù)據(jù)分析系統(tǒng)主要功能包括數(shù)據(jù)分析、數(shù)據(jù)查詢、數(shù)據(jù)處理和賬戶管理功能。

數(shù)據(jù)分析功能根據(jù)系統(tǒng)采集整理、分類、統(tǒng)計、匯總的支付業(yè)務(wù)數(shù)據(jù)，開展各種業(yè)務(wù)特點(diǎn)分析，主要分為運(yùn)行情況匯總分析、資金流量流向分析、支付業(yè)務(wù)應(yīng)用分析、支付支持產(chǎn)業(yè)分析、區(qū)域支付業(yè)務(wù)分析、支付業(yè)務(wù)重點(diǎn)分析等六個模塊，對大、小額匯總數(shù)據(jù)進(jìn)行數(shù)據(jù)固定加工處理，通過建立模型和算法開展有價值的各種數(shù)據(jù)分析，輸出報表、圖形與文字說明。

數(shù)據(jù)查詢功能提供豐富的查詢功能，可以對不同時期的、不同區(qū)域的、不同類型的支付清算業(yè)務(wù)數(shù)據(jù)進(jìn)行全方位、多角度的查詢，用戶能自定義的各項查詢內(nèi)容進(jìn)行任意條件組合的模糊查詢，并將查詢結(jié)果輸出為相應(yīng)的報表，尤其對特色分析與重點(diǎn)分析的查詢。如查詢?nèi)I(yè)務(wù)匯總數(shù)據(jù)，按縣或地區(qū)至省內(nèi)（省外）業(yè)務(wù)數(shù)據(jù)，行業(yè)或單位的業(yè)務(wù)數(shù)據(jù)等。

數(shù)據(jù)清洗范文第4篇

一、豫劇青衣的唱腔及代表人物

豫劇唱腔以韻味醇美、行腔酣暢、吐字清晰、善于表達(dá)人物內(nèi)心情感著稱。青衣的唱腔講究清麗、柔美、圓潤，這樣的唱腔特點(diǎn)不僅令人回味無窮，而且還有助于塑造一些哀怨、堅貞、纏綿的人物形象。豫劇演唱以旦角為主，在四大聲腔的基礎(chǔ)上，逐步形成了以常香玉、陳素真、崔蘭田、馬金鳳、閻立品為代表的五大流派。

五大流派在唱腔上各有特點(diǎn)，而青衣尤以唱功為主。以常香玉為首的常派唱腔，將豫西調(diào)的渾厚、深沉、莊重、浪漫和豫東調(diào)的特點(diǎn)混合在一起，在這兩種音調(diào)匯合上開創(chuàng)了新的局面，使其“腔”呈現(xiàn)出了動態(tài)美。

以陳素真為首的陳派，其唱腔古樸典雅，韻味純正，是祥符調(diào)聲腔的集大成者，有“大音希聲”的王者之韻。

崔蘭田為豫西流派的杰出代表，其唱腔以下五音為體，兼用上五音，同時融會秦腔、曲劇、河北梆子、京昆等劇種的音調(diào)，唱腔旋律豐富多彩，發(fā)音長于鼻腔共鳴，音域?qū)拸V，行家總結(jié)為“氣不暴，聲不搶，字不逼，音不撞，形不露”；行腔樸實，較少使用花腔，表演形靜而實動。

以馬金鳳為首的馬派唱腔，其嗓音明亮純凈、清脆圓潤，音質(zhì)堅實、柔韌，唱法上以假聲為主，真假聲結(jié)合運(yùn)用；唱腔結(jié)構(gòu)嚴(yán)謹(jǐn)，旋律樸實，節(jié)奏明快、舒展，技巧嫻熟。馬派唱腔的特點(diǎn)是剛健豪爽，深入淺出，蘊(yùn)藉醇化。

閻立品的閻派唱腔能做到一個戲一個樣，處處新穎，有人物、有性格，而且感情深厚，耐人尋味。她不以行腔花哨取勝，但無平淡乏味之感；她的唱腔不但繼承了豫劇樸素大方、高昂奔放的特點(diǎn)，而且不乏優(yōu)美娟秀、細(xì)致委婉的表情。

二、豫劇青衣的舞臺表現(xiàn)及實例分析

豫劇是一門綜合性的舞臺表演藝術(shù)，青衣一角雖以唱功為主，但僅有唱是不夠的。要想征服觀眾，還必須有細(xì)膩豐富的舞臺表現(xiàn)。既要會唱，還要能演。優(yōu)秀的青衣演員需要具備扎實的“四功五法”，即以唱功為主體，以做功為載體，念功畫龍點(diǎn)睛，準(zhǔn)確而深刻地表現(xiàn)人物的內(nèi)在情感世界，揭示人物命運(yùn)、刻畫人物性格。

（一）青衣舞臺表現(xiàn)之――念功。念功是一種內(nèi)心的獨(dú)白，表演時要做到字正腔圓，言為心聲。由于青衣念韻白，需要具備一定的聲調(diào)與節(jié)奏技巧，演員在表演時，吐字真切、以字行腔、字聲相諧。豫劇中的念白同時要注意旋律與語氣的表達(dá)，突出豫劇聲腔藝術(shù)的韻律美，做到“念要像唱”。陳素真在臺上的念白被評價為“高低抑揚(yáng)，錯落有致，輕重徐疾，相間得體，字正音準(zhǔn)，脆甜明亮……”極富音樂之美。崔蘭田在豫劇《秦香蓮――抱琵琶》中的念白形散而意不散，哀哀怨怨、如泣如訴，近乎于說白或朗誦，把秦香蓮對丈夫的怨恨淋漓盡致地刻畫出來。

（二）青衣舞臺表現(xiàn)之――做功。因青衣飾演的都是端莊穩(wěn)重的中年女性，在舞臺上的動作幅度較小，表演要訣是“上場伸手似攆鵝，回手水袖搭手脖；飄飄下拜如抱子，跪下不能露腳脖。”“說話不看人，走路不踢裙，男女不挽手，坐下看衣襟?！毖輪T需要熟練掌握水袖、云手等基本技能，對臺步、眼神、手勢等一招一式都必須拿捏到位，訓(xùn)練有素，才能在表演中自然運(yùn)用這些功法和技能，使角色塑造逼真而感人。青衣戲的體態(tài)語言可以傳情，要做到以情做戲，以情傳戲，就要在做功上加強(qiáng)訓(xùn)練。

（三）“青衣第一人”張寶英的舞臺表現(xiàn)。被譽(yù)為“青衣第一人”的張寶英老師是崔派傳人，成功塑造了四大悲劇中的人物形象。她的舞臺表現(xiàn)以穩(wěn)重大方、細(xì)膩真切著稱。張寶英老師擅長通過人物的一笑一顰、一舉一動等較生活化的細(xì)微肢體語言，揭示人物復(fù)雜的思想感情和性格特征。比如在《桃花庵》的演出中，有一個接杯子的動作，張寶英飾演的竇氏只是把用過的茶杯在妙善的托盤中輕輕一按，妙善此時便惶恐地低下了頭。這個細(xì)節(jié)精妙揭示了竇氏的機(jī)敏和妙善的惶恐之情。在《包青天》中，張寶英飾演的秦香蓮見到夫君陳世美，用手扶陳世美三次，三次動作都不同，把一個妻子遭遇丈夫遺棄，渴望丈夫回心轉(zhuǎn)意的復(fù)雜內(nèi)心展示了出來。

（四）“豫劇皇后”陳素真的舞臺表現(xiàn)。陳素真在舞臺表現(xiàn)方面對豫劇的貢獻(xiàn)尤為突出，開創(chuàng)了豫劇舞蹈化、技巧化、形式美之先河，被譽(yù)為“豫劇舞臺上的一尊美神”。她身段動作優(yōu)美規(guī)范、細(xì)膩傳神、剛?cè)嵯酀?jì)、含蓄秀美，臺步行走如飄，能夠準(zhǔn)確傳達(dá)人物的內(nèi)心世界，出神入化的舞臺表現(xiàn)力不知傾倒了多少觀眾。其水袖技法堪稱一絕，長綢舞、水袖功都美輪美奐。陳素真獨(dú)創(chuàng)了飄、抓、轉(zhuǎn)、托、揉、旋袖，以及團(tuán)花袖、煙云袖、扇花袖、波浪袖、飛天袖、鴛鴦袖等多類袖花。其成功塑造了《宇宙鋒》中趙艷容這個青衣形象。她將水袖的多種技法綜合變換，表演起來忽輕忽重、忽剛忽柔、忽疏忽密，把雍容端莊的趙艷容于瘋癲中變化萬端的感情波瀾表現(xiàn)得淋漓盡致，演出了該劇的新水平和豫劇的特色。

三、豫劇青衣的角色塑造

角色塑造是戲曲表演的終極目標(biāo)。表演藝術(shù)家要不斷深入體驗生活，積累生活經(jīng)驗，豐富自己的修養(yǎng)和認(rèn)知能力，才能將青衣的角色進(jìn)行完美演繹。

悲情主義是大多數(shù)青衣戲的感情基調(diào)。通過扮演那些命運(yùn)多舛、飽經(jīng)滄桑，卻又堅持正義、堅韌不拔的女性角色，喚起人們對于舊社會婦女的同情和歌頌。如《桃花庵》中的竇氏、《三上轎》中的崔氏、《鍘美案》中的秦香蓮、《賣苗郎》中的柳迎春等角色，無一不是封建社會悲苦命運(yùn)的女性形象。

真正要演好傳統(tǒng)劇目中的青衣角色，不在于形似，而在于神似。有著“人民藝術(shù)家”之稱的常香玉大師，出生在一個窮苦家庭，“戲比天大”是她的座右銘，她在艱苦的歲月里，堅持下基層體驗生活。她塑造的悲劇人物總能將人的情感與理性的沖突、主觀與客觀現(xiàn)實的沖突等交織在一起，充分揭示劇中人物的悲劇命運(yùn)，給人以“凄美”的感覺，有著強(qiáng)烈的藝術(shù)感染力。

數(shù)據(jù)清洗范文第5篇

原文：

《同姜邦杰游南湖》朝代:宋    作者:葉翥

聯(lián)騎上南明，清譚意自傾。

云垂山掩翠，風(fēng)靜雨飛聲。