首页 > 解决方案 > 各行业解决方案 > 水利资源管理的BI之路
 
  参考：
其它解决方案：行业解决方案
成 功 案 例 ：面向调水工程的BI系统
 
水利资源管理的BI之路
--全国水能的智能分析及决策

1. 概述：

    农村水电站不但是一种能源，更是一种公共的社会资源，一种可以持续发展的资源。进行全国性、系统性的农村水电资源普查和统计分析是为合理地进行开发和利用农村水利资源提供必要的保障手续。

    农村水电具有分布广、数据众多、情况复杂等特点。普查后的数据量将是巨大的。如何获得准确的数据和如何利用好普查结果在系统的建设中是两个最关键的问题。首先没有准确和规范的数据，是无法进行可信统计和分析工作。其次，如果只有原始数据而没有一套好的分析和展现手段，面对大量的数据和错综复杂的关系，数据的价值就无法体现。为此，本方案重点从解决这两个问题入手，通过一系列的技术手段和项目管理方法确保数据的准确和数据价值的提升。
2. 整体思路：

    首先，水电站的信息是典型的与地理坐标相关的信息，所以在系统中必须引入地理信息系统（GIS）。GIS不但可以提供准确的电站分布，还可以帮助实现直观地从地域的角度管理数据和分析数据。如何恰当地在系统建设中使用GIS（后面将进行详细说明）。总的来说可以分为：分离式、外挂式和内嵌式三种模式。具体选用哪一种可以在最后的设计阶段根据实际需要决定。

    其次，由于数据量巨大，数据关系复杂，应该采用目前国际上流行的对大量复杂数据分析所普遍采用的‘商务智能’技术对数据进行后期的加工，并实现动态、灵活、快速的数据分析和决策支持。商务智能技术于90年代初起源于北美，近两年传入中国。经十余年的发展，商务智能技术在欧美等国已经成为一项十分成熟的技术，是各行各业在信息化达到一定程度后的一种依赖性技术。无论是商业公司还是政府机关，都在广泛地利用商务智能技术解决越来越复杂的数据分析问题。

    再次，直观、准确、生动的展现应是系统展现层的建设目标。系统不但要支持各种统计报表，更要有直观的分析图表。而且在分析展现上还将引入‘仪表盘’、自动报警和预警等功能，及大量的用户互动功能。所谓仪表盘可以理解为通过商务智能等一系列的技术手段实现在一张报表中以仪表的型式同时对大量关键数据进行表现的一种方法。它解决了管理者用一张报表进行管理和决策的需要。

    最后，将底层数据、商务智能、地理信息系统有机的整合在一起，从而实现以地图为主要导航手段的数据查询和分析。在此基础上再扩展各种电子文档和相关资料以及管理农村水电站所需的OA功能，便可以构成一个地图上的完善的决策支持知识库和管理平台。（系统的总体结构请参考下图）

系统建设原则：


 ● 必须是基于Internet的系统。通过互联网实现数据的传输和使用，从而解决地域问题；同时减少系统的
  维护和提高易用性。所以系统将采用B/S结构开发，客户端不安装任何组件，只需要IE就可以使用系统。

 ● 前瞻性：系统设计要体现前瞻性。水利资源管理系统应具有足够长的生命周期，在投入使用后很长一段
  时间内都能满足业务的需要。这主要包括体系结构的前瞻性、技术路线前瞻性、产品选择前瞻性和应用
  设计的前瞻性。


 ● 实用性：在考虑前瞻性的同时，必须兼顾实用性。不能选择只有先进技术，但没有实用价值的产品。实
  用性主要从以下方面考虑：界面的友好程度、实现的难易程度、产品的稳定性和效率、厂商及其它可能
  的产品、服务提供商的本地服务和支持能力等。

 ● 可靠性：根据系统的重要程度，制定可靠性级别，避免单点故障，保证业务系统的正常使用。

 ● 开放性，包括：
  a) 体系结构的开放性：整体结构具有很好的模块化设计，模块之间有明确的接口，平台之间有明确的规范；
b) 软件产品选择的开放性：一定要选择市场占有率大，成熟的软件产品，这类产品具有更好的开放性和更多的其它产品接口设计；
c) 应用设计的开放性：在应用设计上注重开放性设计，组件之间的可配置程度要好。

 ● 可攀登性：水利资源管理系统不是个一次性的系统，完成首次的数据收集和分析任务后，不但要起到对
  管理者日常工作的支持作用；而且随时间推移，电站的信息发生变化，管理的重点变化等都需要系统的
  不断发展和提高。所以系统必须具有足够的可攀登性，以保证将来容易的系统升级或扩容，保证最大限
  度地保护系统的原始投入。

 ● 安全保密性：系统应具备统一的安全管理机制，保证信息不被非法篡改和非法查看。

3. 数据采集及采集中的质量控制

    据了解，目前已经制订了详细的数据规范说明（包括编码标准）和采集模板（EXCEL文件）。采集的数据最终会通过各级渠道汇集到省，最后再到部里。这种通过EXCEL文件收集数据的方式是一种广泛采用的模式。但根据我们项目中的大规模数据收集工作的经验，这种方式往往很难控制数据的质量，大大增加后期的数据校对和导入工作量。为此我们建议采用EXCEL模板和网上填报相结合的方式进行。

    EXCEL模板用于省下属机构在没有相应的网络条件或技术条件的情况下使用。各省的最终数据则统一通过网络填报的方式报送。为此，需要在最终数据报送前先建立WEB形式的数据收集平台。建立WEB形式的数据收集平台的意义深远：

1. 在WEB报送系统中可以增加各种的非法格式、异常数据的检测功能，使得在一开始不合格的数据就无法进入系统。
2. 将已经编制的标准编码和名称固化在平台上，在报送时就可以对异常做出提示，从而保证编码和名称的统一化和标准化。
3. 已经编制好的内容（字典）可以用作网上填报时的快速引用，提高报送的效率。
4. 初期上报的数据难免会有错误，在数据核查工作中发现错误可以直接在网上标注，极大方便与各省人员的沟通，可以尽快更正数据。
5. 网上填报系统可以作为以后系统数据的更新和变更时的主要手段，并不是个一次性的工程。
6. 处理不规范的EXCEL数据的开销往往比开发一个网上填报系统的代价还要高。
7. 建议：对不得不使用EXCEL的情况，最好在EXCEL文件中加入必要的数据保持和简单的检验机制（EXCEL本身的功能）。

    由于数据量的巨大。只采用人工检查数据的方法是不够的，应该采用数据库编程核查和人工核查相结合的方式进行。为此，在数据库的设计中增加导入数据的暂存区（参见数据库设说明）。

    各省上报的数据首先导入到这个暂存区，而不是直接入库（正式数据库中）。数据导入数据库后就可以利用数据库的优势，通过程序对数据进行各种排序、比对、分类、过滤、汇总等操作，甚至可以借助商务智能系统中的工具进行进一步的排查，对可疑数据通过不同的颜色加以区分。处理后的数据再通过人工最后确认。只有这样反复才能最大程度地保证数据的准确性。

    只有通过核查的数据才允许导入到正式的数据库中。正式数据库支持增量导入和差异导入；暂存区的数据可以随时更新、替换和删除。这样的操作在系统建设期间是非常实用的方法。

数据收集中的组织工作：
    数据收和校对是个长期和繁重的工作。除了大量的导入/校对工作外，还包括大量的协调工作。而且在系统开发和调试过程中的很长时间内数据质量一般都不可能很快达标。所以必须建立固定的数据处理小组，专门负责数据的收集、整理及校对工作。
 
共 5 页    9 3 [1] [2] [3] [4] [5] 4 :