万能数据库查询分析器使用SQL语句直接高效地访问文本文件Word文件下载.docx
《万能数据库查询分析器使用SQL语句直接高效地访问文本文件Word文件下载.docx》由会员分享，可在线阅读，更多相关《万能数据库查询分析器使用SQL语句直接高效地访问文本文件Word文件下载.docx（16页珍藏版）》请在冰点文库上搜索。
你可以通过它查询ODBC数据源（包括世面上所有的数据库、TXT/CSV文件、EXCEL文件）的数据。
你可以同时执行多条DML语句乃至存贮过程，结果会以你设定的表格、文本框、文件来返回。
从数据库导出千万条数据时，效率与DBMS没有什么区别。
本文将以5.04版本为例，详细阐述“万能数据库查询分析器”中文版本《DB查询分析器》在文本文件处理方面非常强大的功能，你可以直接用SQL语句来访问这些文本文件，访问250万条记录的文件的复杂的关联操作，也不过用时59秒钟。
要注意的是，文本文件的第一行需要有列名。
2产品获得的成就及发展历程
中文版本《DB查询分析器》在中关村在线下载量超过10万多次，位居整个数据库类排行榜中前20位。
在《程序员》2007第2期的“新产品&
工具点评”部分，编辑“特别推荐”了“万能数据库查询分析器”发布。
本期只点评了5个工具，分别是“AdobeAcrobat8中文版”、“迅雷搜索1.7新版上线”、“Google桌面搜索5.0中文发布”、“BEA发布WebLogicSIPServer3.0”和特别推荐“万能数据库查询分析器”发布。
前面4个都是国内外大型软件公司的产品，只有“万能数据库查询分析器”是个人创作的软件。
截止到2013年4月17日，在Baidu上搜索关键字"
万能数据库查询分析器"
，搜索结果达318万。
在Baidu上搜索关键字"
DB查询分析器"
、"
DBQueryAnalyzer"
，搜索结果分别在104万、16万左右；
在Google上搜索“DB查询分析器”、“DBQueryAnalyzer”，结果分别达104万、44万之多。
本人撰写了关于“万能数据库查询分析器”有关技术的64篇文章，发布在《电脑编程技巧与维护》、《软件》、《计算机时代》、《电脑编程技巧与维护》、XX文库、CSDN资源、和本人的四大博客上（CSDN博客、新浪博客、QQ空间和搜狐博客上）。
3为何用《DB查询分析器》来访问文本文件来解决实际问题
在广东联合电子服务股份有限公司实施一张网的过程中，由于路段上传的流水存在大量的异常，导致按照正常的结算流程无法快速地进行路段的结算。
因此，为了进行及时的结算，广东省高速公路公司授权先将异常流水进行忽略，后期再将这些流水进行上传、修改、拆分结算。
最近，为了实施忽略流水的回传，本人做的第一步就是从忽略的流水中按照（流水只有在管理点存在、中心和管理点都存在）这两种情况，再按照流水金额小于0、等于0、大于0三类进行统计成台账（6个文件），然后业务组，再从这些分类批次（6个文件）中确认哪些批次需要回传（形成2个文件，流水大于0.csv和流水小于0.csv）。
最终，本人还要根据这些这两个文件中是否“回传”，再从结算系统中根据复杂的逻辑，找出要回传的流水号并按照区域分成4个文件。
在本次处理中，
源处理文件：
流水大于0.csv、流水小于0.csv、tb_road、管理点存在中心不存在的流水_所有.txt和管理点与中心都存在的部分_所有.txt这5个文件。
后两个文件是从结算系统数据库服务器中通过复杂的逻辑处理生成的中间结果文件。
输出结果：
要回传的流水号并按照区域分成4个文件。
解决方案：
因此，输入条件决定要么在结算数据库系统中建立数据表来完成条件的判断；
要么将结果全部忽略的流水、需要关联的数据表（tb_road）导出成.CSV/.TXT文件，再使用《DB查询分析器》强大、高效的.CSV/.TXT访问功能来实施整个回传流水文件的生成。
tb_road表只是从生产机数据库中导出tb_road表就行了。
图2数据挖掘生成文本文件“管理点与中心都存在部分_所有.txt”
45.04中文版本《DB查询分析器》为例
下面我们就以“万能数据库查询分析器”的中文版本《DB查询分析器》5.04为例，以Windows2000Server操作系统为平台，先创建基于目录“D:
\ODBC_TXT_CSV”中.TXT/.CSV文件的ODBC数据源“odbc_txt_csv”，然后再通过DB查询分析器5.04来访问这些目录下的文件。
操作系统：
Windows2000Server操作系统
CPU：
2.8GHZ单核
内存：
1GB
前台程序：
DB查询分析器5.04
后台文件：
.TXT/.CSV
图3创建基于.CSV/.TXT文件的ODBC数据源
（一）
图4创建基于.CSV/.TXT文件的ODBC数据源
（二）
图5登录odbc_txt_csv，不用输入用户名和口令
图6对象浏览器来查看数据源odbc_txt_csv
图7Windows资源管理器中，ODBC数据源odbc_txt_csv对应的目录下所有的文件
图8用SQL语句来访问.txt和.csv文件，来生成各区域需要回传的流水
图8中的复杂的SQL语句如下：
selectlistno,'
2014-06-16'
from
（
selectdistinctb.LISTNO,b.roadno
--selectcount（*）asrec_num,sum（b.CASHMONEY）/100asCASHMONEY,sum（b.ETCMONEY）/100asETCMONEY
from
（
selectw.roadno,w.squaddate,w.roadname,w.outvehclass,
sum（w.rec_count）asrec_count1,sum（w.cashmoney）ascashmoney1,sum（w.etcmoney）asetcmoney1
（
select*
FROM[流水大于0.csv]
where（备注isnull）and回送标志='
回送'
and（cashmoney+etcmoney）<
unionall
FROM[流水小于0.csv]
）w
groupbyw.roadno,w.squaddate,w.roadname,w.outvehclass
）a,[管理点与中心都存在部分_所有.txt]b
where（（b.CASHMONEY+b.ETCMONEY）<
0）anda.roadno=b.roadnoanda.SQUADDATE=b.SQUADDATE
anda.OUTVEHCLASS=b.OUTVEHCLASSNAME
union
and（cashmoney+etcmoney）>
where（（b.CASHMONEY+b.ETCMONEY）>
anda.OUTVEHCLASS=b.OUTVEHCLASSNAME
where（备注='
只管理点存在'
）and回送标志='
）a,[管理点存在中心不存在的流水_所有.txt]b
）www
whereroadnoin（selectroadnofrom[tb_road.txt]whereareano=4407）
图9一开始执行图8中的SQL语句时，本机CPU使用率立刻攀升至97%
图10生成中片区需要回传的流水文件，共有6万多条记录
图11从结算中心数据库中用挖掘生成的所有忽略的流水，两个文件共250多万条记录
结论：
对于“交互式”这种数据处理的方式来说，将结果导出，用《DB查询分析器》的强大、高效的文本文件的处理功能来分析处理，也是一种不错的选择。
并且《DB查询分析器》的效率非常之高、处理非常方便，可以将源文件当成一个数据库中的数据表一样用标准SQL语句来进行访问。
本人的PC机只不过内存1GB的2005年的DELL台式PC机，对250万条记录的文件进行关联访问的时候，也只是用不到59秒的时间就生成了一个区域的结果文件，期间CPU使用率高达97%。
5本人撰写的关于“万能数据库查询分析器”的64篇技术文章
目前以下6篇文章发布几个国内计算机刊物上：
[1]马根峰DBQueryAnalyzer中断SQL语句的执行杭州：
《计算机时代》，2011年第12期
[2]马根峰DB查询分析器批量执行DML语句并返回更详细的信息北京：
《电脑编程技巧与维护》，2011年第24期
[3]马根峰DBQueryAnalyzer中的事务管理在DB2中的应用北京：
《电脑编程技巧与维护》，2011年第22期
[4]马根峰DB查询分析器中断SQL语句的执行天津：
《软件》，2011年第6期
[5]马根峰万能数据库查询分析器中的事务管理在Oracle中的应用上海：
《微型电脑应用》，2011年第11期
[6]马根峰新产品&
工具点评特别推荐：
“万能数据库查询分析器”发布程序员，2007年2期
以下58篇文章发布在XX文库、CSDN资源、和本人的四大博客上：
《万能数据库查询分析器使用技巧之
（一）》直到《万能数据库查询分析器使用技巧之（十三）》共13篇
《The1sttipofDBQueryAnalyze》直到《The13thskillsofDBQueryAnalyzer》共13篇
《如何在客户端配置ODBC来访问远程DB2forWindows服务器》
《HowtoconfigureODBCDSNinClienttoaccessremoteDB2forWindows》
《如何在服务器上配置ODBC来访问本机DB2forWindows服务器》
《HowtoconfigureODBCDSNtoaccesslocalDB2forWindows》
《软件开发顶尖高手的杀手锏SQL语句》
《WhichSQLstatementisthetrumpcardtotheseniorsoftwaredeveloper》
《DB查询分析器批量执行DML语句并返回更详细的信息》
《用“万能数据库查询分析器”测试SQLite对4大SQL精髓语句的支持》
《用“DB查询分析器”的对象浏览器来展现数据库的数据字典》
《万能数据库查询分析器用户已基本涵盖当前所有数据库系统》
《TheDBMSthatDBQueryAnalyzerUsersoftenusecoverallkindsofDBMS》
《查询分析器应必须具备的功能-中断查询的执行》
《万能数据库查询分析器的EXE文件加壳技术》
《ExepackerpreventDBQueryAnalyzerfrombegingdebugged》
《自己开发的“万能数据库查询分析器”终于有了较大的成果》
《DBQueryAnalyzer中断SQL语句的执行》
《DB查询分析器批量执行DML语句并返回更详细的信息》
《DBQueryAnalyzer中的事务管理在DB2中的应用》
《DB查询分析器中断SQL语句的执行》
《万能数据库查询分析器中的事务管理在Oracle中的应用》
《特别推荐：
“万能数据库查询分析器”发布》
《软件开发高手须掌握的4大SQL精髓语句
（一）》
《软件开发高手须掌握的4大SQL精髓语句
（二）》
《软件开发高手须掌握的4大SQL精髓语句（三）》
《软件开发高手须掌握的4大SQL精髓语句（四）》
《软件开发高手须掌握的4大SQL精髓语句（综合篇）》
《巅峰之作----“万能数据库查询分析器”5.01发布》
《万能数据库查询分析器与EXCEL强强联合进行数据分析》
《DB查询分析器批量执行多条SQL语句并查看各自的执行时间》
《DB查询分析器访问EXCEL时，要在表名前后加上中括弧或双引号》
《ThetablenamemustbeenclosedindoublequotationmarksorsqarebracketwhileaccessingEXCELbyDBQueryAnalyzer》
《基于数据仓库星形模式的广东省高速公路一张网资金结算情况分析系统》
备注：
如果您的计算机上安装有“万能数据库查询分析器”以前的版本，请先将旧版本Uninstall，然后再安装新版本，谢谢！
升级会员 