档案数字化加工方案.docx

1、档案数字化加工方案档案室、档案馆馆藏档案扫描、数字化加工整体解决方案- 0 - _第一节质数字化加工作业前期准备 ,1一、数字化工作人员准备 ,1二、数字化工作软件、硬件准备 ,4三、确定数字化内容、数量及用户需求,5第二节数字化加工流程及主要技术方案 ,6一、入库提卷、拆卷 ,6二、标引著录 , 7三、档案扫描 , , 8四、图像处理 ,11五、全文 OCR、生成双层 pdf、板式还原及格式, 12六、总质检 ,14七、批量挂接 ,15八、还卷及数据备份提交 ,15第三节质量控制方案和保证措施 ,17一、加工质量保障措施 ,17二、多环节，多层次的质量检查体系,17三、阶段性验收与终验相结合

2、的严格验收程序是质量控制的终级保障 ,19第四节安全保密控制 , ,21保密协议 , ,22第五节售后服务 , ,24- 1 - _项目背景随着全国文化信息资源共享工程与中国数字图书馆工程的起动，信息化已成为国际潮流，信息资源建设成为当务之急。信息资源建设的重点是电子文献、各类数据库、网络资源、电子档案、电子图书等新型数字化信息资源的建设。在数字化信息资源建设中，很大的一个需求是将现有的纸介质印刷品数字化，使之成为能够用计算机阅读、理解、查询、检索的电子文件，最终将其应用于数据库存储，或通过 CD-ROM、Internet 网进行出版，或上传数字档案馆供用户使用。以传统纸张为载体的保存方式，占

3、据了大量的空间，需要特殊的环境，而且不方便查询，随着时间的推移，还面临着腐蚀、老化等问题。而将纸介质文件信息进行电子化处理，保存到光盘上，具有存储、管理、共享等功能，还可以减少文件库房占地，节省保管设备和人员方面开支，又方便统计和进行远程查询。因此，将档案、期刊、文件等资料通过扫描仪，扫描成图像文件，再通过处理转换成电子文档，建立目录和索引，制作成电子文件，已是当务之急。- 2 - _第一节 数字化加工作业前期准备一数字化工作人员准备1 . 甲方人员职务：现场交接管理人员人数要求：一名专业要求：为学校档案馆负责档案管理工作的技术或管理人员。职责范围： . 负责与乙方的档案提卷和还卷等交接工作，

4、协同甲方人员作好交接清单记录并签字。. 负责监督乙方规范化加工。随时把握乙方加工进度并进行协调。. 及时关注并抽查乙方加工质量代表甲方与乙方进行及时的沟通及问题协调，确保项目顺利完工。2 乙方人员2.1 管理人员主要为：熟悉现场加工管理，熟悉数字化整体作业流程，具有较强组织能力和现场管理及沟通能力的乙方负责人。2.2 工程技术人员主要为：熟悉计算机软、硬件技术，了解档案数据库标准和系统开发。了解档案管理等相关专业知识的乙方技术部技术支持工程师。2.3 数据采集作业员主要为：了解档案数据库数据标准和计算机软件应用等相关知识的乙方数字化制作部工作人员。- 3 - _人员安排见表 3-1职务 职责1

5、负责人员，资源的调配工作。2负责施工组织设计、管理。项目负责3负责施工条件的保障及与甲乙双方人关于项目进展状态的汇报和协调工管作。理人员1.负责与乙方的档案提卷和还卷等交接工作现场主管2.负责现场的人员管理和加工管理3.负责数据的终验和挂接4.配合项目负责人做好与乙方的沟通协调工作。著录人员负责将档案卷内目录及其它索引信息进行手工录入为电子数据信息并校对数负责按制定的技术规范将档案资料扫据扫描人员描采集1.去污：将扫描获取的图像进行图像去人污;去黑边及去杂点等；员2.纠偏：将偏斜的图像进行纠正处理 ;图像处理3.文字处理：将不清楚的文字进行加深人员或变浅；4.拼接：将页面较大的图像进行拼接处理

6、；1.负责将处理好的图像进行全文识别、图像矢量 2.校对、板式还原和格式转换化人员 3.对已经产生的成品数据进行初验后移交给现场主管终验并挂接。数字化工作软、硬件准备人备注员项目负责人不一定要常驻现场，但要通过一切通讯手段1 人和定期到现场的督导，切实做到对该项目加工进度和加工质量的掌控1 人1 人1 人在进行图像处理的时候，肯定是逐页处理， 所以要留意每一1 人 页扫描的质量，发现扫描质量问题立即发还上一工序重扫并作好记录。矢量化人员最终定员需结合1-3矢量化的图形人数量和采集难度。二 .1配备硬件数量及档次要视数据采集工作情况及数据量大小。- 4 - _2甲方提供 PC机 4-6 台给乙方

7、作为采集作业使用，其他硬件设备由乙方自行解决。3场地 : 甲方提供。4办公用具：甲方提供打印机（以实际用量为标准）办公桌椅档案资料的装订及打印机所用的全部耗材。5. 其他条件：提供电力和饮水。软硬件准备详见表 3-2表 3-2软、硬件配备列表软、硬件名称数量详细配置响应时间提供方1需支持全文检索使用功能。项目开始需综合档案管理系统一套2支持 TIFF 和甲方到位PDF 格式数据的批量挂接功能。数字化流程管理和加工能满足本加项目开始需全套工项目所有的乙方软件、 OCR 软件到位技术要求服务器一台项目开始需甲方到位扫描仪（ A3 幅面）一台富士通 A3 幅面项目开始需乙方FI-4750C(ADF)

8、到位A4 幅面项目开始需扫描仪（ A4 幅面）一台虹光 -FB6030乙方到位(平板 )计算机4-6 套PC 机项目开始需甲方到位三 . 确定数字化内容、数量及用户需求在数据采集之前，首先要客观真实统计数字化内容和数量，确定用户使用需求，- 5 - _然后制定对应方案和技术控制以便准确地进行施工安排。表 3-3三峡大学档案馆档案数字化用户需求调研表档案类型招生名册学籍档案学生成绩党群档案基建档案科研档案其它：档案数量约 件约 面约 件约 面约 件约 面约 件约 面约 件约 面约 件约 面约 件约 面数字化准备情况档案装订档案著录档案整理排序档案装订档案著录档案整理排序档案装订档案著录档案整理排

9、序档案装订档案著录档案整理排序档案装订档案著录档案整理排序档案装订档案著录档案整理排序档案装订档案著录档案整理排序纸张及保存情况备用户需求注很好一般影像化较差很差矢量化很好一般影像化较差很差矢量化很好一般影像化较差很差矢量化很好一般影像化较差很差矢量化很好一般影像化较差很差矢量化很好一般影像化较差很差矢量化很好一般影像化较差很差矢量化填表人 职务第二节 数字化加工流程及主要技术方案- 6 - _档案数字化加工主要流程包括：提卷 - 拆卷 - 档案著录 - 扫描 - 图像处理 -OCR-校对 - 版式还原 - 转双层 PDF-终验 - 挂接。图一 档案数字化加工流程图一、 入库提卷、拆卷1. 从

10、档案室移交档案，严格执行原始档案的交接手续，使用双方项目负责人确认的档案交接清单（完成清点登记） 。2. 档案整理：编写页码、核对纸质档案页码、对可拆钉的文件做拆钉处理以适应扫描的要求、对需要修复的档案进行归并整理（如果发现破损严重，无法直接进行扫描的档案，应先进行技术修复、折皱不平影响扫描质量的原件应先进行相应处理后再进行扫描，发现破损严重的档案须立即报知项目相关负责人）- 7 - _制作卷内目录，扫描文件抽取3 按照扫描处理量明确交接周期和档案交接量 （双方项目负责人签字， 以保在施工过程中档案不损失、不丢失。 ）4 装订案卷应保证装订牢固，案卷整齐，卷内材料不松动，脱落，保持与原案卷一致

11、。图二二、 标引著录按要求将文件所需信息录入到软件数据库里，标引著录按照国家档案局有关标准结合用户档案著录的具体要求进行。1. 录入方式采用手工录入的方式2. 校对方式校对以软件校对和打印输出、对比校对相结合，错误率在万分之二以下。案卷目录和卷内目录按照档案的原始数据录入。卷案目录和卷内目录的样式经用户同意可做相应调整。对档案目录数据修改和补充的数据，须填写更改- 8 - _资料、更改资料放入原案卷内，卷内目录及其他不全的需补充完整。三、 档案扫描1. 扫描方式：根据档案幅面的大小选择相应规格的扫描仪或专业扫描仪进行扫描。大幅面档案可采用加长式扫描或者图像拼接处理方式处理，同一页面有两个以上文

12、件，需分别扫描。2.扫描色彩模式：以黑白二值扫描为主，附有灰度（彩色）照片及原件分明度很低的档案，可视情况采取灰度和 24 位真彩色扫描。然后以黑白二值保存。例：蓝底招生名册，此种档案长见为 A3 幅面、纸张很薄，底色与文字的分明度很低。实物档案查看时都显吃力，此种档案如果用黑白二值扫描，则会出现大幅暗面，文字显现不清；如果使用彩色扫描，文字部分明度很低。只有使用灰度扫描，效果相对好一些，如图三。扫描后的图像再辅以黑白二值保存，则最大限度的提高了图像质量，如图四。图三 灰度扫描效果 图四 保存为黑白值后的效果3.分辨率：无全文检索需求的文档分辨率调整为 200DPI 最为合适。需要全文检索而做

13、 ocr 识别的文档，黑白二值扫描分辨率最佳为 400dpi，此分辨率下识别成功率最高。 24 位真彩色扫描分辨率标准为 200dpi。4图像文件的大小：黑白二值扫描 A3 页面： 20K40K；灰度或彩色扫描A3 页面： 100150K。5如遇字间距和行间距过密、原件本身是复印件等字迹不清楚的情况，可适当增加扫描的分辨率，但要保证图像清晰的同时，又不影响远程查询和浏览的速度。- 9 - _6清晰度：扫描图像字迹清晰、颜色恰当，不宜过浅或过深，并且不得出现字迹笔画残缺或字迹笔画叠合而影响阅读的情况，即使原档案存在锈斑变质、颜色过浅或深浅不一致，也保证扫描图像可读，扫描留下的墨迹宽度不得超过0.

14、5 厘米，并且指印和黑线不能覆盖或影响正文内容。7根据档案实体情况，在档案电子文件中相对应目录设置“复制件” 、“原件不清”标志。目录以原有档案目录为准，在实际处理过程中著有未归类的新目录。可根据情况修改目录，增加或调整标准目录，对档案原目录数据修改或补充的数据，需填写更改资料，更改资料放入原案卷内，能实现一条目录对应多个图像和一个图像对应多条目录的编目。8图像内容：8.1 实时在屏幕上监控扫描全过程， 遇有漏扫、重张，图像黑边、偏斜、折角、不清晰等情况，则进行重扫或补扫。8.2 检查扫描件是否合乎要求，扫描图像必须与原图页面一一对应，不得出现颠倒、缺页、重页或错页情况，不能有遗漏、重复，扫错

15、的现象8.3 扫描的页面内容居中显示，不可出现明显偏左或偏右的现象，正文内容、页眉、页脚、反面印章、附件、手写注释等信息完整；图像内容与书本面完全对应，不得出现书页内容残缺或将旁边页面信息扫入本页的现象。 （对图像黑边、偏斜、折角、不清晰等情况进行处理，以达到用户需求）8.4 纸张较差档案扫描方案：由于进行数字化的档案会有部分为历史档案，纸张质量比较差，对于这部分纸张质量较差的历史档案扫描，我们本着以下原则：8.4.1 保证档案安全。纸张较差的档案多为破损档案，对于破损档案更应该在生产流程中加以特殊对待， 不能造成二次破坏。 保证档- 10 -_案的安全是第一要务。 因此，在处理纸张较差的档案

16、时， 不允许使用蘸水防滑等有破坏档案可能性的操作方法。8.4.2 保证扫描质量。历史档案之所以进行档案数字化，其中最主要的目的之一就是抢救这部分历史档案，今后在应用这部分档案时，尽量避免人为翻阅历史档案而给档案造成二次伤害， 而应使用电子系统，使用扫描件。这样档案扫描的质量要尽可能的清晰、干净，尽可能的恢复历史原貌，这对扫描质量的要求很高。8.4.3 高效高质的完成任务。9. 扫描登记：认真填写纸质档案数字化转换过程交接登记表单，登记扫描的页数，核对每份文件的实际扫描页数与档案整理时填写的文件页数是否一致，不一致时应注明具体原因和处理方法。四、 图像处理1. 逐张检查图像质量（包括黑边、折角、

17、图像偏斜度、清晰度、失真度等进行检查，发现不符合图像质量要求时，应重新进行图像处理） ，档案顺序（页号）是否正确，有无漏扫、重张等情况（发现文件漏扫时，应及时补扫并正确插入图像。发现扫描图像的排列顺序与档案原件不一致时，应及时进行调整。）2. 纠偏：图像整体倾斜不得超过 1 度，不得出现图像的一部分倾斜或扭曲而影响阅读的现象。如果档案页面存在部分倾斜的，以页面中标题纠正为准。3 去污：所有扫描留下的黑线、指印、阴影或污点都必须清除干净（在放大50%的情况下）由于印刷质量或纸张质量等造成的页面上有零星的污点和反面倒映文字污点比较多，如果在页面视图下看不清楚，或该污点嵌在文本行中无法清除，可以不清

18、除，但应尽量保证图像可读。- 11 -_4 全文页面及局部文字的加深和变浅的处理： 原始档案的清晰度较低时， 可提高图像的清晰度，修正原资料中存在的字间距和行间距过密，文字较深或较浅，字迹不清楚的缺陷，确保文字及图像信息清晰可辨。5 图像拼接：对大幅面档案进行分区扫描形式的多幅图像， 应进行拼接处理，合并为一个完整的图像，以保证档案数字化图像的整体性和数字化档案的准确可读。6 照片页处理： 必要时采用专业的图像处理软件进行处理， 确保照片的清晰度。7 图像存储：存储格式以 G-4 压缩 TIFF 格式保存。 A4 幅面档案保存文件不得大于 100K；其他幅面档案扫描形成文件在保证影像质量的前提

19、下，尽量缩小文件占用空间。扫描文件存储命名必须与条目档案号一一对应。五、 全文识别（ OCR）及生成双层 pdf、版式还原及格式转换将扫描处理完成后的文档利用专业的识别软件进行全文 OCR，如甲方对识别成功率有严格要求的，还需另外进行人工校对，校对结束后将版式还原及转换成双层 PDF文件格式。根据用户对识别率的要求，可选择性进行人工校对。进行人工校对和不进行校对的优缺点对比：1不进行人工校对：其原理是在单层 PDF 的基础上利用计算机软件进行全文 OCR 识别后生成双层 PDF 文件。从而激活了图片中所反映的文字， 而达到提取文字和利用原文所包含的文字进行检索的目的。但是不进行人工校对和版式还

20、原，识别的准确率取决于原始资源的情况及保存现状。优点：效率高、成本低、能利用原文检索浏览速度快。- 12 -_缺点：识别准确率取决于原件的质量，所以准确率不稳定。适应范围：、原件版面干净及保存完好的资源。 （准确率可达 95%以上）、原文中只含部份核心检索内容的资源。 （如学籍档案，检索的重点只是围绕学生的身份信息）2进行人工校对：其原理是在 OCR 的基础上，为了确保识别的准确率而增加了人工校对和版式还原的工序。可实现无障碍的全文检索。优点：全文检索无差错，准确率可达 99%，且文本层和图像层一一对应。缺点：效率极低、成本极高、因为进行了版式还原，所以原真率不到98%，而且存储空间很大而致浏

21、览速度降低。适应范围：、所载信息珍贵且使用频率很高的资源。、数字化项目资金预算充裕且项目实施时间宽松的资源。、有很好的硬件环境支持的数字化项目。- 13 -_六、 总质检1. 对扫描处理完成后的图像页进行检验，对档案拆分、扫描、修正、去污、插图、照片的处理以及文本和图像页的匹配等质量进行全面检验，对于质量达不到要求的进行重扫、补扫等操作。2. 对文本域录入与文本录入域的标引、文件的页号和页数进行对比，对扫描前图像页的标引与扫描后的图像页的编号与页数进行对比，发现不合格的登记清单重新处理。3. 对图像质量的检查，确保图像版面清晰，干净，大小一致，方向一致。4主要质检标准：4.1加工后的电子影像在总数量、完整性、清晰度上与源文件保持一致。4.2案卷著录、按文件的属性著录数据库字段，检查“文件路径”字段与文件实际存储位置一致，差错率控制在千分之五以内。4.3电子影像档案件信息定义数据差错率控制在百分之二以内。4.4电子影像档案卷内页码差错率控制在千分之一以内。4.5每页电子影像左右端正度控制在三度以内。4.6电子影像漏扫，压边率控制在千分之一以内。4.7电子档案与条目数据的挂接一致，差错率