结合SQL Server全文检索对Word内容进行检索的三个方案

数据库 SQL Server
除了利用office提供的API对word文档内容进行检索外,本文简要总结如何结合SQL Server的全文检索技术对Word文件的内容进行检索的三个方案。

导读:除了利用office提供的API对word文档内容进行检索外,本文简要总结如何结合SQL Server的全文检索技术对Word文件的内容进行检索的三个方案。

一、结合Windows索引服务进行全文检索

方案摘要:

  1. 改变文件存储时的文件名;
  2. 配置索引服务器,并将索引服务器与MS SQL Server关联。
  3. 修改SQL语句,将进行全文查询语句的内容加入查询条件中

一个详细的实例,参考这里:http://database.ctocio.com.cn/51/11440551.shtml

优点:可以独立对文件以目录方式物理存放,并且这些文件继续以doc格式存放。

缺点:只能读取,不能写入。

二、结合BLOB数据进行全文检索

方案摘要:将doc文件以BLOB数据格式varbinary(max)存放于数据库的表中,再对表进行全文检索。这是最为常见的一种方案了。

一个简单插入表的示例:

  1. -------二进制文件查询示例  
  2. /*************************************/  
  3. Use Master  
  4. Go  
  5. IF EXISTS (SELECT name FROM sys.databases WHERE name = N'BlobDataDemoDB')  
  6. DROP DATABASE BlobDataDemoDB  
  7. GO  
  8. USE Master  
  9. GO  
  10. CREATE DATABASE BlobDataDemoDB  
  11. GO  
  12. --------启用全文检索  
  13. /*************************************/  
  14. execute sp_fulltext_database 'enable' 
  15. go  
  16. use blobDataDemoDB  
  17. GO  
  18. --创建一个包含BlOB列的表  
  19. /*************************************/  
  20. if OBJECT_ID('SampleBlobTable'is not null 
  21. drop table SampleBlobTable  
  22. go  
  23. CREATE TABLE SampleBlobTable  
  24. (  
  25.    [PKID] int identity(1,1) primary key,  
  26.    [FileType] Nvarchar(32) null,  
  27.    [FileName] Nvarchar(255) null,  
  28.    [FileContent] VARBINARY(MAXNULL,  
  29.    [AddTime] datetime default(getdate())  
  30. )  
  31. GO  
  32. IF EXISTS (SELECT * FROM sys.objects WHERE   
  33.    object_id = OBJECT_ID(N'[dbo].[CPP_InsertOneBlobDataToTable]')   
  34. AND type in (N'P', N'PC'))  
  35. DROP PROCEDURE [dbo].[CPP_InsertOneBlobDataToTable]  
  36. GO  
  37. --创建一个插入数据到SQL server的存储过程  
  38. /*************************************/  
  39. CREATE PROCEDURE CPP_InsertOneBlobDataToTable  
  40. (  
  41.    @FileType nvarchar(32),  
  42.    @FileName nvarchar(255),  
  43.    @FileContent VARBINARY(MAX)  
  44. )  
  45. AS 
  46. INSERT SampleBlobTable([FileType],[FileName],[FileContent],[AddTime])  
  47. VALUES (@FileType,@Filename,@FileContent,getdate())  
  48. GO  
  1. ///////////////////////////////////////////////  
  2. using System;   
  3. using System.Collections.Generic;   
  4. using System.Linq;   
  5. using System.Text;   
  6. using System.IO;   
  7. using System.Data.SqlClient;   
  8. using System.Data;   
  9. namespace BlobDataSearchDemo   
  10. {  
  11.      class Program  
  12.      {  
  13.          const string conn = @"Server=ap4\Agronet09;DataBase=BlobDataDemoDB;uid=sa;pwd=as;";  
  14.          static void Main(string[] args)  
  15.          {  
  16.              SaveDoc2SQLServer(@"D:\2008Data\StreamData\Doc\轻舞飞扬.doc", conn);  
  17.              SaveDoc2SQLServer(@"D:\2008Data\StreamData\Doc\天龙八部.doc", conn);  
  18.              SaveDoc2SQLServer(@"D:\2008Data\StreamData\Doc\English.doc", conn);  
  19.              Console.ReadKey();  
  20.          }  
  21.          private static void SaveDoc2SQLServer(string filepath, string conn)  
  22.          {  
  23.              FileInfo fi = new FileInfo(filepath);  
  24.              if (fi.Exists)  
  25.              {  
  26.                  //Open the stream and read it back.  
  27.                  using (FileStream fs = File.OpenRead(filepath))  
  28.                  {  
  29.                      byte[] b = new byte[fi.Length];  
  30.                      SqlConnection Conn;  
  31.                      SqlCommand cmdUploadDoc;  
  32.                      UTF8Encoding temp = new UTF8Encoding(true);  
  33.                      while (fs.Read(b, 0, b.Length) > 0)  
  34.                      {  
  35.                          Conn = new SqlConnection(conn);  
  36.                          //Setting the SqlCommand  
  37.                cmdUploadDoc = new SqlCommand("CPP_InsertOneBlobDataToTable", Conn);  
  38.                cmdUploadDoc.CommandType = CommandType.StoredProcedure;  
  39.                cmdUploadDoc.Parameters.Add("@FileName", SqlDbType.NVarChar, 200).Value = fi.Name;  
  40.                cmdUploadDoc.Parameters.Add("@FileContent", SqlDbType.VarBinary, 0).Value =b;  
  41.                cmdUploadDoc.Parameters.Add("@FileType", SqlDbType.NVarChar, 32).Value =  
  42.                            fi.Extension.Replace(".","");  
  43.                          Conn.Open();  
  44.                          cmdUploadDoc.ExecuteNonQuery();  
  45.                          Conn.Close();  
  46.                      }  
  47.                  }  
  48.              }  
  49.          }  
  50.       }  
  51. }  

查询结果: 

 

注意:

  1. 在数据库设置全文检索时,必须有一个字段是文档类型,SQL Server全文检索依据此文档类型启动相应的doc引擎进行检索。
  2. 必须设置全文检索的语言,中文为2052,英文为1033。

     

优点:将doc文件导入SQL Server数据库中,可以方便地进行读取和全文检索,必要时也可以写入。

缺点:varbinary(Max)受2G大小限制,而且数据库存入大量的BLOB数据,将变得异常臃肿,检索速度将大大降低。

三、结合FileStream进行全文检索

方案摘要:与方案二类似,只不过利用FileStream技术将doc文件以数据格式varbinary(max)存放于数据库外的物理文件中,再对表进行全文检索。

前提:必须安装全文检索并启用FileStream

 

参考:

http://msdn.microsoft.com/zh-cn/library/bb933993.aspx

http://www.cnblogs.com/downmoon/archive/2010/05/06/1727546.html

http://www.cnblogs.com/downmoon/archive/2010/05/08/1730044.html

优点:将doc文件导入SQL Server数据库中,可以方便地进行读取和全文检索,必要时也可以写入,并且克服了方案二的缺点。varbinary(Max)字段只存放索引,而实际的内容存放于数据库外,大小只受NTFS文件夹物理大小的限制。

小结:本文简要总结如何结合SQL Server的全文检索技术对Word文件的内容进行检索的三个方案。本人认为方案一和方案三均可行。欢迎交流。

原文链接:http://www.cnblogs.com/downmoon/archive/2011/04/21/2024351.html

【编辑推荐】

  1. SQL SERVER全文检索的实现
  2. 配置SQL Server全文检索服务
  3. SQL Server 数据库对文件进行全文检索的正确查询方案
  4. 通过SQL Server数据库来实现对上传文件的全文检索
  5. 浅析SQL Server全文检索查询
责任编辑:艾婧 来源: 博客园
相关推荐

2010-11-10 14:18:15

SQL SERVER全

2010-07-09 10:36:22

SQL Server

2010-07-16 15:42:32

SQL Server

2009-07-06 18:18:41

SQL Server全

2010-10-20 10:55:54

SQL Server全

2010-07-22 09:48:14

SQL Server全

2010-07-01 10:20:41

SQL Server

2010-07-21 09:58:21

SQL Server全

2009-12-28 15:05:56

ADO.NET 数据

2009-12-31 10:57:14

ADO.NET SEL

2011-08-03 10:40:17

SQL Server数全文检索

2010-05-04 12:18:43

Oracle Text

2023-08-02 08:02:30

Redis数据原生方法

2010-05-06 12:08:34

Oracle数据库

2015-07-13 11:39:25

SphinxSQL

2010-06-17 10:56:57

SQL Server数

2009-03-19 10:24:27

全文检索文本定位Oracle

2012-03-30 14:31:53

HibernateJava

2009-08-14 11:24:10

MySQL全文检索MySQL Like索

2012-08-30 10:20:55

Lucene分布式全文检索
点赞
收藏

51CTO技术栈公众号