您好,欢迎访问华图信息官网!
欢迎来到华图信息技术有限公司档案管理系统\档案信息化建设\档案数字化加工服务
全国咨询热线:15515975772
当前位置: 首页 > 新闻中心 > 行业资讯

石油档案数字化

作者:老师 时间:2023-02-27 17:04:18 点击:

石油档案数字化

李效蕊

(中原油田档案管理处)

摘 要 地质资料信息服务集群化产业化与地质资料信息数字化密切相关。要推进与最终实现地质资料信息服务集群化产业化,首先,要从地质档案资料汇交入手,收集齐全完整的地质档案资料电子文件;其次,逐步将纸质档案数字化。档案数字化是实现“集群化”“产业化”的基础,“产业化”是“集群化”的必然结果,是对传统服务理念、服务方式和服务能力的重大变革。以资源共享和提高油气田勘探开发为目的,推进地质资料信息服务集群化产业化。

关键词 地质资料汇交 地质资料信息服务 集群化 产业化

1 引言

地质资料信息服务集群化产业化与地质资料信息数字化密切相关。要推进与最终实现地质资料信息服务集群化产业化,首先,要从地质档案资料汇交入手,收集齐全完整的地质档案资料电子文件;其次,逐步将纸质档案数字化;档案数字化是实现“集群化”“产业化”的基础,“产业化”是“集群化”的必然结果;提高地质资料数字化信息化水平,不断扩大服务领域,推进地质资料信息服务集群化产业化,是贯彻落实科学发展观的重要举措,是实现地质工作服务方式顺势而为、与时俱进的重要创新,是解决地质资料管理诸多问题的一项根本性措施,是对传统服务理念、服务方式和服务能力的重大变革。推进地质资料信息服务集群化有利于避免地质工作重复投入、减少社会投资浪费;有利于社会资金投入地质资料信息服务产品开发,拉动地质资料信息服务产业化发展;有利于逐步解决地质资料管理馆藏机构和队伍建设方面存在的突出问题。

2 地质资料汇交在油田勘探开发工作中的重要作用

汇交到地质档案(资料)中心的石油地质档案资料是指石油企业在地震、钻井、测井、录井、试油、油井开发等油气田勘探开发过程中所产生的一系列文件材料,是油气田勘探与开发工作中形成的重要基础信息资源,具有可重复开发利用、长期提供服务的重要功能;是油田勘探开发的重要档案,是开展地质科学研究与一线生产的重要依据。中原油田的“汇交中心”就设立在油田档案处下属的地质资料室。分发工作的质量与效率直接影响着中原油田科研、生产与决策;要及时了解和掌握生产动态和生产进度,就要求档案(资料)的收发要讲究时效性,比如,在油田开发上,对于一口新井的投产,最关键的问题是“固井质量图”的产生。因为有了它,就可证明该井的前期所有工作已经结束,马上可以进行射孔并投产。只要“固井质量图”一到,要求不得超过 24 小时送到科研与生产第一线,这就要求收发工作即快捷又要准时。从理论上讲,按照档案界的最新观点,只有用计算机对档案信息进行全文(实体)管理和利用,档案工作才能称得上是真正进入信息时代,档案管理也才能真正称得上是现代化。进一步提高油田地质资料数字化信息化水平,扩大服务领域,提升服务功能,提高地质工作社会影响力和公共服务能力,加快石油地质档案(资料)收发工作的信息化、自动化进程,对于石油企业推进地质资料信息服务集群化产业化起着举足轻重的作用。要想加快实现企业档案信息化建设,首先从档案(资料)汇交上下工夫,加快电子文件的收集,推进档案信息资源数字化、自动化进程,促进地质资料信息服务集群化产业化。

2.1 纸质文件的归档

长期以来,收发工作一直是档案管理工作中一个重要的环节。对于纸质地质档案资料的汇交来讲已经成为惯例,各个汇交地质档案资料的汇交单位,严格按照汇交制度及时汇交纸质档案。中原油田每年总计收发各类纸质地质档案(资料)几十万份,多者高达上百万份,收发质量的好坏,直接影响着中原油田勘探开发科学研究与生产一线对地质档案的利用;档案是生产力,企业的生存与发展离不开档案。油田的历届领导十分重视油田地质档案资料的汇交工作,制定了严格的档案资料汇交、分发与接收制度,规定要求生产与科研单位应及时地向档案资料中心汇交档案资料。并要求档案资料汇交中心的档案工作人员将接收的重要的档案资料在 24 小时之内,必须送到科研与生产第一线。几十年来,中原油田档案资料汇交工作一直在健康的轨道上运行。

2.2 电子文件的归档

2.2.1 中原油田归档电子文件的类型

中原油田经过 30 多年的长足发展,立足油田,外创市场,不断引进新技术、新方法。原来向上级领导汇报工作,需要带去大量的纸质档案,携带既不方便,且容易丢失。现在图文并茂的汇报方案,只需要一个小小的活动硬盘就可以解决。由此所产生的电子文件也是种类繁多。地质资料电子文件依据工作需要的不同,有下列各种不同的类型:

(1)在勘探开发等科研活动中形成的报告、报告附图册、各种地形图、多媒体汇报方案,制作电子文件所用的计算机软件、所使用软件的版本,以及利用计算机辅助设计(CAD)、辅助制造(CAM)、检测、仿真实验等技术形成的具有查考利用价值的数据文件、图形文件、模型文件。

(2)油田以“井”为单元形成的各种关于井信息的电子文件。如:完井、测井、录井、试油、化验分析等:①地质完井报告与录井资料。包括完井地质报告、附图、附件及与其相应的电子文件。录井资料,如:小班地质、气测、钻时班报表和记录簿,大班地质日志等原始档案资料。②以井为单元的测井资料。包括:测井解释报告和组合图和解释成果表、标准图、RFT 测井图表、吸水剖面图等各种附图。③以井为单元的试油资料。包括:对油井进行的注灰、注水、压裂形成的地质资料。④钻井工程报告与原始资料。包括钻井工程报告、定向井技术服务总结、泥浆报告、固井报告、井下作业总结及与其相应的电子文件。⑤对各种岩心、岩屑进行分析化验产生的化验分析资料。

(3)地质调查处形成的以地震勘探信息为主的二维、三维地震磁带。按记录内容分为:原始带、中间成果带、最终成果带。磁带的种类,包括 3490、3480、3590、8MM、9 轨带等,数据记录格式有SEG-Y、SEG-D 等。

(4)本企业制作的各种数据文件,如数据库、图形库、方法库等。

2.2.2 电子文件归档现状

通过调查,我们发现,计算机技术发现到了今天,办公自动化在中原油田很多部门得到了广泛的应用:应用计算机技术进行数据处理与绘图,科研报告的编辑与打印,制作出的多媒体汇报材料图文并茂。但是,对于电子文件的形成与管理还处于初级阶段。所谓的文件管理,主要是将电子文件打印成纸质文件后对纸质文件的管理,而针对电子文件的规范管理几乎未进行,往往是存储在硬盘中的文件被随意修改、删除;拷贝成软盘的电子文件散落在各个二级单位计算机操作人员、设计人员手中,没有系统地收集整理。对于电子文件的收集与管理重要性都有所认识,但又都不够重视,特别是对电子文件管理的要求、流程等方面的规定不够严谨,电子文件管理没有形成统一的管理模式。因此,各个上交汇交的单位在向“汇交中心”归档纸质档案的同时,并没有上交汇交相应的电子文件。

3 加快油田石油地质档案(资料)收发工作信息化推进地质资料信息服务集群化产业化

按照国土资源部的要求,中石化系统 2012 年继续推进地质资料信息服务集群化产业化进程。笔者认为,所谓地质资料信息服务集群化产业化,离不开电子文件的管理,档案数字化是实现“集群化”“产业化”的基础,“产业化”是“集群化”的必然结果,是对传统服务理念、服务方式和服务能力的重大变革。长期以来,分散的保存与管理,以及缺乏资料信息共享、综合利用的机制和手段,使宝贵的地质资料信息常常无法发挥其真正的价值。只有收集齐全完整的电子文件,逐步实现电子文件的管理,使地质资料实现共享。因此,如何加快推进地质资料信息服务集群化和产业化,进一步提升地质资料信息服务水平,已成为一顶重要课题。作为油田企业来说,首先要保证将现阶段产生的电子文件收集齐全完整,尽最大努力使当前产生的电子文件不再流失;其次,逐步将纸质档案数字化;以资源共享和提高油气田勘探开发为目的,推进地质资料信息服务集群化产业化进程。

3.1 应在已建立的收发档案(资料)机读目录的基础上,加大电子文件与电子档案的收集力度

作为石油企业,地质档案资料形成后都有一个归口,就是都统一汇交到各个油田的“汇交中心”。多年来,“汇交中心”严格按照油田的汇交与分发方案进行接收与发放,同时也是检验纸质地质档案资料汇交是否完整的监督机构。随着科学技术的不断发展,现代化技术的应用,形成了海量的地质资料电子文件。“汇交中心”自然也可以成为汇交电子文件最好的监督机构。因此,现实与形势都要求我们要对中原油田汇交的石油地质档案资料进行调查研究,研究在汇交的这些地质档案资料中哪些是在产生纸质档案的同时,也产生了电子文档;研究这些电子文件接收、保管、利用的技术方法。油田有关领导与档案行政部门应尽快制定出石油地质档案(资料)的电子文件归档与汇交的范围,参照国家有关文件,制定出本企业的《纸质文件与其同时产生的电子文件归档的汇交制度》。加大对电子文件与电子档案的收集与监管的力度,要求企业信息集成系统的编制人员在其系统设计和运行过程中加入电子档案文件的鉴定、归档、保存、利用等档案的管理内容,从电子文件的收集、积累、整理、归档、移交、保管、利用、统计等方面做出较细致的规定,以维护档案的信息资源的有效性、可靠性与实时性;将具有凭证作用和参考价值的电子文件及时地纳入归档范围,监督与督促油田各个汇交地质档案资料的单位与部门,在汇交纸质地质档案资料的同时,将同纸质档案一起产生的电子文档归档两份由档案馆保存,其余纸质文件按照原来的归档要求的份数归档。

电子文件收集应注意事项:

(1)注意对草稿文件的收集。在办公自动化的起步阶段容易忽视对草稿文件的收集,这些电子文件的绝大多数被新起草的文件不断地覆盖,或因其存储介质用于其他的存储被清洗。在一些草稿文件中,包含着许多重要的修改过程信息,具有查考价值,列为归档内容进行保存,不可任其清除。对于起辅助作用或正式的电子文件,则应及时收集与整理,并与相应的纸质文件之间建立标识关系。中原油田档案管理处对这部分电子文件已经进行了定时利用,由各个单位的兼职档案员向档案处在线移交。

(2)注意对电子文件载体及其相关软硬件设备的收集:鉴于电子文件的特点,对不同信息类型的电子文件,由于其技术特性的不同,存储载体和记录的信息的标准、压缩方法也不同。应使档案管理的要求向前延伸到文件管理工作中。的确,随时随地产生的电子文件、电子图纸,使企业档案工作者再也无法坐等档案的最后形成与归档了。把目前的公文办理和档案保管的分段管理,从对电子文件连续管理的角度统一起来,并提出符合档案管理的原则要求,包括从电子文件的形成,运行到归档管理,应当由主管部门或负责人统一协调,指定专门机构或人员负责;在电子文件的形成、积累、归档、保管过程中,应及时登记设备环境、相关数据等,以保证电子文件归档的质量;生成电子文件的专用软件必须一同归档;对已归档的电子文件的管理,应有严格的制度和有效的技术措施,确保其信息的原始性、真实性和完整性;作为档案长期保管的电子文件,应与相同内容的纸质文件或硬拷贝一同归档;确保归档电子文件的完整性和有效性。

(3)电子文件的收集工作必须贯穿文件产生的始终。

石油档案数字化

电子文件从形成到归档有一段时间间隔。在这一阶段,电子文件被更发或丢失的可能性很大。因此,应当从电子文件形成起,就进行妥善的管理;定期把符合归档条件的电子文件信息联机传送,在计算机网络上集中,并按档案管理要求的格式存储到可长期保存的脱机载体上;具有保密要求的电子文件,上网时必须符合国家或部门的规定,要有必要的安全保密措施。涉密电子文件严禁上开放网络。

实现资源共享,改变服务方式,把原来只提供专业性、基础性信息拓展到提供数据处理、咨询与决策、技术支持等多种信息服务,地质档案资料信息化是关键。收集不到电子文件档案,实现地质资料信息服务集群化产业化就是一句空话。由于中石化总汇交上交工作的开展,促进了油田电子文件的收集工作的开展。中原油田自 2006 年以来已将油田每年产生的重点井的信息资料收集齐全,到目前为止共收集到电子文件光盘 6000 多盘。

3.2 在纸质档案形成电子目录的基础上,逐步实现纸质档案电子化

在加强收集电子文件的同时,有计划有步骤地进行纸质地质档案资料电子化。中原油田应用中石化中原油田地质资料管理系统已经几年时间了,已将中原油田的井信息全部录入了数据库,形成了条目数据库,其中部分井信息已有全文数据库。经油田“收发中心”发放的地质资料条目,在地质资料送达“收发中心”24 小时就可上网。勘探开发的科研用户与生产一线各单位用户,均可通过油田局域网随时了解到最新产生的地质档案资料情况。中原油田应在已经形成的电子目录的基础上,分步对纸质地质档案资料电子化,根据档案的分类不同,采取不同的方式。

地质资料中的图形档案是最多的,解决了图形档案的电子化问题,纯文字档案对于现在的技术条件下不是问题。对于图形档案可以通过以下方法进行电子化:

一是图形扫描技术。通过手动及自动参数设置及技术开发,形成了针对蓝晒图、清绘图、铅笔草图及受潮变形图的综合扫描技术,从而保证了蓝晒图的扫描质量。二维自适应阈值扫描技术,较好地解决了铅笔草图扫描难的问题;自动电子扭曲技术,彻底解决了受潮变形图扫描的输入图形失真的难题。

二是光栅图处理技术。该项技术用于对扫描过程中不能消除或不能彻底消除的光栅图质量缺陷作最后修正,以提高光栅图质量,并为准确识别光栅图的图元细节做准备;光栅图处理技术,可完成光栅图的角度旋转,倾斜校正,消蓝去污,光栅图分割,局部提取与合并,光栅图透明叠加,光栅图的编辑,为旧图翻新、衍生及重复利用提供了技术方法。

三是光栅图矢量化技术,此项技术可完成光栅图到矢量图的转换,采用自动矢量化和手动矢量化方式,完成光栅图线条及区域的轮廓线、中心线+轮廓线及中心线的矢量化追踪,文字的模式识别,形成在工种及专用领域内广泛使用的矢量图的雏形。

四是矢量处理技术。这项技术利用矢量加工程序提供绘图工具及命令,对已矢量化的矢量原始图形的矢量实体进行编辑、区域平滑填充等,生成供绘图仪输出的完美的矢量图。

五是光栅矢量混合处理技术。此项技术可对光栅图局部需要变动的对象做手工矢量化,而其余部分仍以光栅图像格式保留,并以光栅矢量混合方式输出。该项技术可快速生成图形,常用于报告插图。

六是图形输出技术,利用大幅面彩色喷墨绘图仪完成A0以下幅面的彩色挂图、彩色图册(双面/单面)的成套绘制出版。智能幅面最优化排版技术,卷纸成批队列绘制,既节约了成本,又提高了工作效率,保证了彩色挂图及图册制作精度高、质量好。

在地震物探方面,利用地震处理系统和地震解释系统产生了大量的二维、三维地震剖面图形文件,形成了大量二维、三维地震磁带,由于保存时间较长,有的已发生粘连现象,对于这部分地质资料档案可以利用计算机技术将磁带转储到移动硬盘上保存。不但有利于保管,而且还节约了大量的馆藏空间。

4 加强收发档案业务人员的培训

要实现地质资料信息服务集群化产业化,离不开人的参与与实践。要以提高业务能力为目标,不断完善档案人员的知识结构,紧密结合工作实际,开拓进取,要把深入开展实现地质资料信息服务集群化产业化为契机,提高规范化管理水平,强化岗位练兵,开展与数字档案馆系统应用相关的计算机应用基础知识、数字化技术知识、网络技术知识、现代化管理技术知识教学,要尽快地培养一批既懂业务、又懂计算机与网络知识的复合型人才。中原油田档案管理处今年准备积极争取与高校联合办班,开展档案专业学历教育,逐步改善档案队伍专业结构和完善组织管理机构。

5 转变服务观念 变革服务方式

档案人员不再单纯是档案的保管员,还应是档案信息财富的拥有者和提供者;档案馆(室)也不再是单纯的收藏机构,还是档案信息的聚集中心、交流中心和信息技术的用户。知识经济时代档案馆(室)的改革创新方向就是走信息化道路,在为社会提供档案信息服务的基础上,创建档案信息服务产业,建立以档案信息搜集、加工、贮存、检索、服务为主要内容的工作实体。

档案管理人员应转变服务方式,变被动服务为主动服务:①开展网上利用服务;②开展在线服务;③兴办服务实体;④构建资源共享系统;⑤广泛服务于油田的科研、生产、经营等项活动。力求及时、准确、无误地向利用部门提供可靠的档案资料信息。这样,既能满足利用者,又能解决实际问题,使档案信息真正在油田科研、生产、经营等活动中发挥重要作用。但是这些服务方式的变革都离不开档案信息化,只有将档案转变成了电子文档,各种编研加工都会来得容易,开展各种形式服务变革才能变成现实。

6 完善相关政策制度

研究制定地质档案资料信息汇交、共享交换,建立地质资料数据更新与服务机制,研究建立地质资料信息共享协议政策,为推进多单位、多部门、多专业、多层次分布的资料信息、人才、技术、装备的共享与集群综合,奠定制度保障,地质资料信息服务集群化产业化才能得以实现。

油田地质档案中非结构化数据管理模式探索

李燕

(中国石油化工股份西南油气分信息中心档案馆)

摘要 本文针对非结构化数据管理中存在的问题,分析了西南油气田地质档案非结构化数据管理特点,提出了数据采集、数据存储、数据管理与数据利用的技术架构,并对非结构化数据的管理、应用进行了深刻剖析,总结出了以技术解决方案、行政管理模式和数据服务三位一体的管理模式,为油田地质档案中非结构化数据的管理与应用探索出了一个有效的模式。

关键词 非结构化 数据存储 地质档案 应用 管理

0 引言

随着我国经济建设的不断发展,信息资源越来越成为企业或者组织的核心和命脉。对于信息密集型的石油行业来说尤其如此。在多年的生产实践中,国内的石油行业已经发展出了针对大部分信息的数据综合管理、数据应用、企业标准和行业标准等技术和成果,极大地支撑了石油勘探开发的各个过程。然而,和国外的石油相比,在信息资源的协同、分析、挖掘、共享、决策支持、集群计算上还存在一定的差距,这其中的核心要点就是如何对非结构化数据进行有效的存储和利用。

对于典型的石油工业企业来说,信息资源存在于各种载体中,例如纸质的书籍或者论文、PDF文档、图形图像文件、扫描件、电子书、光盘等,这些信息最终都可以转化为非结构化数据。而对非结构化信息的管理需要面对如下问题:

高容量:非结构化数据通常是一个或多个文档、图件、多媒体等,容量在百兆、千兆级的比比皆是。

石油档案数字化

异构化:非结构化数据的来源、格式、载体都各不相同,难以进行统一的管理和检索。

复杂性:非结构化数据因其高容量、异构的特点,在存储、检索、过滤、提取、分析和挖掘方面非常复杂。

再处理:非结构化数据在定制、交换、加密方面存在大量的个性化需求,格式的差异和多样性也导致了对这些数据的再处理非常困难。

本文即是对这些问题进行详细的讨论和研究,结合油气田地质档案非构化数据的存储与利用,探讨一种可行的方法和合理的解决方案。

1 非结构化数据管理的技术架构

非结构化数据与结构化数据相对,系指不方便用数据库二维逻辑表来表现的数据即称为非结构化数据,包括所有格式的办公文档、文本、图片、XML、HTML、各类报表、图像和音/视频信息等。

西南油气田通过配置和集成软硬件产品,设计并实施了适合非结构化数据存储与利用的技术架构,由低到高分别是数据采集(预处理)、数据存储、数据管理、数据使用(图1)。

图1 非结构化数据存储与利用的技术架构图

数据采集是非结构化数据管理最基础的过程,是把原始的或者第一手的资料转化成可供处理的数字化信息的关键步骤。

非结构化数据存储是把勘探科研、生产、管理中产生的文档、图件、专著存放在数据库或者文件服务器上。一般采用两种方式:一是把非结构化数据转换成二进制流,存放在关系型数据库中,同时一并记录相关的辅助信息(可自定义);二是把非结构化数据保存到目录服务器上,在关系数据库中只记录目录服务器上的索引信息和辅助信息(可自定义)。图2示意了这两种方式。

图2 非结构化数据存储示意图

数据管理是对已经存储成功并且经过了结构化的信息进行再处理,包括数据的分类、检索、元数据化、标准化、统计和归并。

数据使用是非结构化数据管理的最终目的,信息如果不能交流、共享,那么一个组织产生的信息再多,也不免成为信息孤岛。采用基于.net和Web Service体系架构,为信息的共享和协同提供了技术上的保障。

2 非结构化数据管理应用解析

西南油气田按非结构化数据管理的技术架构开发并组建了西南油气田地质资料管理平台体系,对非结构化数据的管理实现了6大功能:非结构化数据的整理、元数据、基于索引服务器的全文检索、索引编制、任务管理、知识管理(表1)。

表1 中石化西南油气田非结构化数据管理功能统计表

2.1 非结构化数据管理的功能架构

西南油气田地质资料管理平台是一个完全的B/S模式资料管理系统和信息发布系统,其中,地质资料管理系统包括用户管理、机构管理、权限管理、日志管理、数据管理、资料上传、资料整理、资料审核、元数据、资料检索。信息发布系统包括资料借阅、资料上传、在线浏览、资料检索、下载。

除了能够完成资料管理和信息发布的功能外,还依据自身的工作方式,在平台中加入了本企业元素,如:资料属性的自定义、用户功能选择、借阅流程与归档著录一体化流程的植入、上传和下载的压缩与加密、用户与安全方案的自动绑定,新到资料的查询、个性化报表的查询和打印、催还信息的发布等。主要功能架构如图3。

图3 功能架构图

2.2 西南油气田地质资料非结构化数据管理的主要特点

2.2.1 地质资料及文档的包装和结构化

在数据存储方面,采用了基于Web Service数据访问层组件,通过修改设置可以分别连接Oracle 9 i数据库、SQL Server 2000数据库等多种数据库,用户可以根据需要选择。地质资料及文档的包装和结构化是指在数据采集和存储方面采用了“资料体-文件体”的二元封包方式。对所有类型的文件或者文件集合都可以定义为资料体,同时采用元数据对资料体进行描述;从逻辑上来说,资料体是一个或者多个文件实体的集合,通过这种方式,就统一了各类非结构化数据的表现形式、外观和行为,有利于将来的数据交换和协同。图4描述了这种二元关系。

图4 非结构化数据的二元封包方式

2.2.2 任务管理

文档资料被采集并提交,资料体和元数据信息就会被写入关系数据库中(目前支持Oracle),而文件体会通过任务自动上传到专门的文件服务器中,同时由索引服务自动为这个文件体创建索引。入库文档资料的默认存储方式是通过磁盘文件来存放的,如果需要把入库文档资料以二进制流的形式保存到关系数据库中,则需要部署和配置数据持久化服务。图5对文档资料采集和存储的过程进行了直观的描述。

图5 文档资料采集和存储的任务管理流程

任务管理是对上传下载过程的任务化。为了应对文档资料的采集要求,使用上传任务来管理上传过程,整个过程可以通过服务在后台依次自动完成,对用户的操作不造成任何影响,避免了传统的文件采集过程中用户需要耗费大量的时间来等待上传;为了确保数据的完整性,上传过程支持断点续传。直观的上传任务管理器把需要上传的文档存放在任务队列中,用户可以随时停止或者启动上传任务,最大程度的减少因为网络状况或者容量问题带来的不便。

2.2.3 元数据的定义和描述

在数据采集的过程中可以对文件定义元数据,文件的元数据继承自所属的案卷属性,这样一旦将文件归入某一个资料类别,那么就可以设置这个文件的扩展信息;另一方面,分类的元数据格式能够成为这一类文件的元数据模板,同类文件的元数据格式都是相同的,便于进行同类资料的数据交换。图6说明了案卷(资料类型)、文件和元数据的关系。

元数据作为非结构化数据的标签,其意义是非常重要的,系统的检索功能的查全和查准率主要是基于元数据的定义是否合理和准确,因此系统必须要提供元数据信息的修改和动态扩展功能,只有提供了上述功能,系统的信息描述才可能准确和丰富,这也是很多类似的信息系统所缺乏的。

图6 案卷、文件和元数据的关系

依据中石化企业标准《Q/SH0167—2008石油天然气勘探与开发地质资料立卷归档规则》,根据地质资料管理的特点,结合西南油气田的实际情况,需求分析,明确各种(系统管理、资料加载和在线浏览、资料查询、资料借阅和下载、资料销毁、资料压缩加密、资料审核、资料接收和分发)功能,对地质资料的文件元数据、档案元数据、企业扩展元数据进行了充分研究与定义,实现了不同类别的地质资料定义不同属性,方便查询与借阅。例如表2。

表2 地质资料元数据属性表

2.2.4 基于文件索引服务器的全文检索

对非结构化数据的检索采用了两种方式:基于属性、关键字的精确检索和基于内容的全文检索。全文检索过程采取了提交—建索引—查找—组织结果—返回的过程来完成。非结构化数据被提交到了文件服务器,索引服务程序就创建或者更新索引文件(自动过程),当用户发出检索请求时,通过搜索引擎,获取包含请求内容的结果并返回给请求者。索引服务程序能够从入库的文档资料中自动抽取文本内容(图7)。

索引服务程序的工作包括:侦测文件目录的变化,文件被上传、移动、修改或者删除,就更新对应的索引;定期对文件目录的整个范围进行索引优化,保障索引在全局上的有效性和效率,这个工作可以自动完成,也可以由用户手动完成。

西南油气田基于此提供多种逻辑查询,如模糊查询、全文查询、精确查询,以及目录浏览和全文浏览。如图8。

图7 全文检索工作过程

图8 查询检索截图

2.3 西南油气田非结构化管理应用效果

西南油气田从2005年开始全面启动地质资料非结构化数据建设,经过多年的共同努力,全面完成了地质资料的非结构化目录数据库建设,共计入库地质资料条目125万条,完成了不同类别地质资料的元素据设计并进行了全面属性提取,提取的内容包括了文件元数据、档案元数据以及企业扩展元数据三大类,为地质资料网络化管理与利用提供了强有力的搜索引擎包。

同时,按照非结构化数据建设理论,西南油气田积极开展了成果地质资料全文数据库与地质图形库的建设,通过历史文档与图形的扫描整理,共计入库电子文档24万个,总容量2.9 T。与油田气地质资料目录数据库相结合,通过地质资料管理系统,实现了地质资料非结构化数据网络完整发布与全面应用。

经统计分析,在实现非结构化数据的网络化管理与应用以后,西南油气田近5年地质资料年平均利用率高达11万件次/年,是建成前的4.5 倍,有效提高了地质档案资料的管理、使用水平,节约了成本,取得了良好的经济效益。

3 非结构化数据的管理模式探索

作为企业信息资源的表现形式,非结构化数据的管理不单单是一个技术体系或者一个系统,而应该是一个庞大的系统工程。笔者根据西南油气田地质档案多年的信息化建设经验和非结构化数据管理经验,认为“技术解决方案、行政管理模式和数据服务”三位一体的管理模式是油气田非结构化数据管理的有效模式(如图9 所示)。

图9 非结构化数据管理模式图

首先,行政管理模式是整个非结构化数据管理的组织保障,由稳定的管理团队、完备的可行性研究、明确的管理需求、充分的风险评估以及务实的组织实施组成。良好的行政管理模式能够确保一个组织上下一心,共同推进信息体系建设,可以说它决定整个体系建设的成败。

数据服务是非结构化数据信息管理的基础。是指对非结构化数据进行采集、创建、加工、传递、组织、整理与规范的过程。同时也是用户和开发者之间的润滑剂,首先它能够按照用户的需求为用户处理大量枯燥的数据整理和规范工作,其次从用户的角度,指出软件的缺陷,并敦促开发者进行修改。通过数据服务,可以有效地保障用户业务的高效运转、技术体系的不断完善,发挥信息体系建设的最大效能。

技术解决方案从产品层面为非结构化数据的管理提供了软硬件平台,是从数据采集到应用的完整的技术体系。包括:基于多种大型关系数据库的信息存储体系、基于内容的非结构化数据的文件服务器、提供全文检索、关联检索的索引服务器、基于元数据的灵活的文件交换格式和个性化定制、灵活的权限策略和强大的安全策略;技术解决方案是非结构化数据存储与利用的核心。

4 结束语

非结构化数据存储和应用是各油田分勘探决策支持系统的重要组成部分,这一部分研发成功后,能够为决策支持所需要的信息资源提供基础的平台。同时,基于这个平台之上的非结构化数据的应用能够直接为决策支持系统服务,通过信息协同、文件检索、数据挖掘和知识管理等技术和概念的应用,能够使油气田信息化建设上缩短甚至达到国际先进水平,向着勘探数字化、数据资产化、工作协同化和决策科学化方向迈进一大步,从而带来巨大的经济效益和社会效益。

参考文献

[1]张志刚,姚玮.海量非结构化数据存储问题初探[J].中国档案,2009(8).

[2]吴广君,王树鹏,陈明,李超.海量构化数据存储检索系统[J].计算机研究与发展,2011(7).

什么叫档案数字化,档案数字化有哪些好处?

什么叫档案数字化,档案数字化的好处
档案数字化是一种新型的档案信息管理模式,它把各种载体的档案资源转化为数字化的档案信息,以数字化的形式存储,网络化的形式互相连接,利用计算机系统进行管理,形成一个有序结构的档案信息库,及时提供利用,实现资源共享。
1.代替原件使用,有效延长原件的保存时间。
2.数字化副本分地保存。要长期或永久保存的重要档案,用数据备份的方法制成多份数字化副本的备份分地保存。
3.恢复档案材料模糊褪变的字迹。对字迹出现模糊扩散或褪变的档案,可经过计算机扫描等处理技术恢复模糊褪变字迹。
4.提高办公效率,数字化档案管理使资料能及时归档,并尽快提供利用,从而提高办公效率。
5.提高经济效益,数字化管理档案使传统的以纸质为载体的档案信息对象转为机读档案,不仅节约了保管费用,节省了占地空间,而且查阅方便迅速,避免了反复印制资料而造成的纸张和人员的浪费。

中国石油吐哈油田公司的管理模式

落实9项基本工作制度:组织机构设置整分合工作制、思想政治工作一岗双责工作制、思想政治工作目标管理责任制、领导干部密切联系群众工作制度、党建工作监督考核制度、党风廉政建设责任制、民主管理民主监督制度、党群工作督办制度、业绩考核制度。推行9抓工作方法:抓重点工作,抓主要矛盾,抓有利时机,抓有效载体,抓制度落实,抓党员干部,抓先进典型,抓调查研究,抓一人一事。 认真做好8个结合:组织教育和自我教育相结合,思想教育和严格管理相结合,说服教育和解决实际问题相结合,物质激励和精神激励相结合,褒扬先进与帮扶后进相结合,形势教育和政策宣传相结合,求实和创新相结合,思想政治工作和企业文化建设相结合。 【三塘湖盆地勘探开发】2008年,三塘湖盆地勘探取得重大突破,4个5000万吨级规模储量基本落实。积极预探马中石炭系获得新发现,新层系、新类型勘探取得重大突破。整体评价牛东9口井获得成功,实现储量整体升级和动用。立体勘探西峡沟二叠、三叠系发现新油藏。积极拓展牛圈湖在侏罗系、二叠系获得新发现,4个油气富集区奠定了4个5000万吨的储量规模。勘探开发一体化项目顺利推进,水力喷砂压裂等37项技术攻关取得显著效果。三塘湖盆地西峡沟勘探成果获2008年股份重大发现二等奖,三塘湖盆地石炭系勘探被列为20项重要进展之一。持续优化开发方案,提高新井产量贡献率和方案符合率,三塘湖牛东区块打出一批高产井。加快重点工程建设步伐,建成牛圈湖联合站,三塘湖原油外输管道项目按计划运行。【安全环保】2008年,油田以构建“大安全”格局为目标,层层落实安全环保责任,强化安全管理,安全环保形势保持平稳。一是层层签订安全环保责任书,将油田内部单位、驻矿单位、专业化单位、承包商统一纳入安全环保责任体系,共签订安全环保责任书1.98万份,覆盖率100%。二是全面推进HSE管理体系建设,编制并发布C版HSE管理体系文件,通过宣贯运行,各级领导和管理人员的HSE管理能力、一线员工的操作能力和应急能力进一步增强。三是贯彻落实集团反违章六条禁令,修订“反三违”(反违章指挥、反违章操作、反违反劳动纪律)管理办法和生产作业区域禁酒管理规定,组织员工对习惯性、顽固性违章行为进行识别,严肃查处“三违”行为。四是加强隐患治理,共投入资金1.2亿元,对温米联合站原油处理系统改造等73项隐患进行整改,夯实安全生产基础。五是加强安全专项治理,持续开展井控、危险化学品、交通、消防等专项整治活动,降低安全风险。六是广泛开展安全教育,全年培训员工1500多人次,开展应急预案演练96次,提高员工安全素质。七是加强节能减排工作,节能4.8万吨标煤,节水137万立方米,超额完成集团下达的节能节水指标。做好生态敏感区环境保护工作,完成集团下达的污染物排放总量控制指标,实现清洁生产。【科技进步】2008年,油田加快实施科技攻关项目,加大成果应用力度,开展省部级科研项目12项,地局级课题128项,项目正点运行率98%,获得省部级科技成果9项,地局级科技成果46项,获得国家专利授权23项,形成科研与生产相互促进的良好局面。一、地质认识进一步深化,油田勘探效益不断提升。创新火山岩油气勘探地质理论,研发形成火山岩有利储层预测等6项配套技术,提高了探井成功率。加快实施地震采集、处理、解释一体化攻关,为有效落实勘探目标提供可靠资料。? 二、油藏研究水平稳步提高,油田开发效果持续改善。强化精细油藏研究,深化鄯善、丘陵、温米油田重点区块剩余油平面分布认识,为老区实施精细挖潜奠定基础。积极开展提高采收率试验和研究,初步形成注气效果评价方法体系。? 三、钻采工艺技术日趋成熟,油田上产措施更加有力。强化火山岩、致密砂岩油气层压裂改造技术攻关,马27、柯19等10口井压裂改造后获得工业油气流。积极开展稠油水平井解堵技术攻关,研制出新型冲洗工具,平均单井日增油12?7吨,难采储量规模动用的技术手段更加完备。? 四、数字油田建设步伐加快,油田信息化程度稳步提高。加大信息系统建设和应用力度,整合完成油田信息门户网站、OA办公自动化等99个系统,提高数字油田应用系统运行的安全性和可靠性。加快推广集团勘探与生产技术数据管理系统、人力资源管理系统等项目,完成数字档案馆一期建设任务,实现部分技术档案的数字化管理,油田信息化进程进一步加快。【支援地方建设】2008年,油田坚持走融合发展道路,积极支持地方经济建设。出资300万元支持哈密地区防洪体系建设,出资180万元支援巴里坤县大柳沟石油牧民新村抗震安居工程建设,出资100万元支持巴里坤县牛圈湖村牧民整体搬迁及新农村建设,落实自治区包村到户及哈密地区“百企帮百村 共建新农村”工作资金20万元,捐赠办公、医疗设备、扶贫物资及慰问等合计21万元。支援哈密经济开发区绿化改造及油区街道办事处道路维护100万元.