Sql Support within Solr-类Sql的solr搜索实现(1)

尽管lucene、solr如此的频繁、如此的普遍被使用。仍然有许多人、需要开发者所见即所得的方式,将查询用起来。一方面为了迎合传统sql用户的习惯,另一方面提升通用搜索产品的可用性,也丰富solr的功能接口。有必要实现

类sql的 solr查询实现。

 

社区总是无比的强大,总是只要你能想到的一定有人想到,只要你想到的一定有人已经尝试在实现,甚至已经有实现的初级版本,这个开头就给予了屌丝很好的指引。类sql的开源项目
solrflux就是这么一个开源项目。目前看,貌似没多少人关注这个。从注释和用例看,作者是日本友好人士。http://code.google.com/p/solrflux/

 

1. solrflux 用例体验

public class TestDemo {
  public static void main(String[] args) throws
IOException
    
{
        
//ConsoleReader conReader = new ConsoleReader();
     
String filedemo="testSql2Solr.txt"; // 改为从文件读取sql 语法
        
BufferedReader fileReader = new BufferedReader( new
InputStreamReader(new FileInputStream(filedemo)));
        

        
EvalContext ctx = new EvalContext();

        
StringBuilder builder = new StringBuilder();
        
CharSequenceReader reader = new CharSequenceReader(builder);
        

        
final String NORMAL_PROMPT = "SQL>";
        
final String CONTD_PROMPT = "... ";

        
String prompt = NORMAL_PROMPT;
        

        
String targetUrl="http://localhost:8080/terminator-search/search4****-0";

        
String name ="conn"; //这个name 对应testSql2Solr.txt 中的 信息,然后关联到
targetUrl     

        
UseStatement use = new UseStatement();
        
use.setUrl( targetUrl );
        
use.setName( name );
        
try {
             
use.execute(ctx);
        
} catch (Exception e) {
             
e.printStackTrace();
        
}
        

        

        
while (true)
{       

            
String line = fileReader.readLine();
            
//System.out.println("--"+line);
            
if ( line == null ) {
            
 System.out.println("line is null so exit");
                
break;
            
}
           
// String line ="SELECT * FROM conn WHERE id="104614938"";
            

            
builder.append(line + "n");
            
reader.reset();
            
try {
                
if ( tryEvaluate( reader, ctx ) ) {
                    
prompt = NORMAL_PROMPT;
                
} else {
                    
prompt = CONTD_PROMPT;
                    
continue;
                
}
            
} catch (Exception e) {
                
e.printStackTrace();
                
prompt = NORMAL_PROMPT;
            
}finally{
            
 
            
}
            
builder.setLength(0);
            
builder.trimToSize();
        
}
        
fileReader.close();
    
}
 
    

    
private static boolean tryEvaluate(Reader reader, EvalContext
ctx)
    
throws SyntaxException, EvalException, IOException
    
{     

      //String
expr= null;
    
 //ANTLRStringStream  in = new
ANTLRStringStream(expr);  
        
ANTLRReaderStream stream = new ANTLRReaderStream( reader
);        

        
RecognizerSharedState state = new RecognizerSharedState();
        
SolrqlLexer lexer = new SolrqlLexer(stream, state);//词法分析器
        
CommonTokenStream tokenStream = new
CommonTokenStream(lexer);//获取lexer构造的记号流
        
SolrqlParser parser = new SolrqlParser(tokenStream);//语法分析器
        

        
try {
            
stmt_list_return ret = parser.stmt_list();
            
if (ret != null) {
                
evaluate((CommonTree)ret.getTree(), ctx);
            
}
        
} catch (MismatchedTokenException e) {
            
if (e.getUnexpectedType() == SolrqlParser.EOF) {
                
// immature input. continue.
                
return false;
            
} else {
                
throw new SyntaxException(
                        
lexer.getErrorMessage(e, SolrqlParser.tokenNames), e);
            
}
        
} catch (RecognitionException e) {
            
throw new SyntaxException(
                    
lexer.getErrorMessage(e, SolrqlParser.tokenNames), e);
        
}
        

        
return true;
    
}
    

    

    
private static void evaluate(CommonTree t, EvalContext ctx)
    
throws EvalException, SyntaxException
    
{
        
printTree(t, 0);
        

        
List statements = new StatementListBuilder().build(t);
        

        
for (Statement stmt: statements) {
            
Object ret = stmt.execute(ctx);
            

            
if ( ret == null ) {
                
System.out.println("OK.");
                
continue;
            
}
            

            
if ( ret instanceof UpdateResponse ) {
                
printUpdateResponse((UpdateResponse)ret);
            
} else if ( ret instanceof SelectStatement.Result ) {
                
printSelectResult((SelectStatement.Result)ret);
            
} else {
                
System.out.println("Result: " + ret.toString());
            
}
        
}
    
}
    

    
private static void printSelectResult(SelectStatement.Result
res)
    
{
        
int i=1;
        
for (SolrDocument doc: res.getDocuments()) {
            
System.out.print(Integer.toString(i) + ": ");
            
int j=0;
            
for (Map.Entry e: doc.entrySet()) {
                
if (j > 0) {
                    
System.out.print(", ");
                
}
                
System.out.print(e.getKey() + "=" + e.getValue().toString());
                
++j;
            
}
            
System.out.println();
            
++i;
        
}
        

        
System.out.println();
        
System.out.println("Query=" + res.getQuery());
        
System.out.println(
                
"Found " + res.getResponse().getResults().getNumFound() +
                
" documents, Offset=" +
res.getResponse().getResults().getStart()
                
);
        
System.out.println(
                
"Status=" + res.getResponse().getStatus() +
                
", Elapsed Time=" + res.getResponse().getElapsedTime()
                
);
    
}
    

    
private static void printUpdateResponse(UpdateResponse res)
    
{
        
System.out.println(
                
"Status=" + res.getStatus() +
                
", Elapsed Time=" + res.getElapsedTime()
                
);
    
}

    
private static void printTree(Tree t, int indent)
    
{
        
if (t != null) {
            
StringBuffer sb = new StringBuffer(indent);
            
for (int i = 0; i < indent; ++i) {
                
sb =
sb.append("   
");
            
}

            
if (!t.isNil()) {
                
System.out.println(sb.toString() + t.toString());
                
++indent;
            
}

            
for (int i = 0; i < t.getChildCount(); ++i) {
                
printTree(t.getChild(i), indent);
            
}
        
}
    
}
}

-------------------------testSql2Solr.txt--------------

SELECT * FROM conn ;
SELECT * FROM conn WHERE id="1581";
SELECT * FROM conn WHERE id!="1581";
SELECT id,nick FROM conn WHERE 0<2000;
SELECT * FROM conn NWHERE "se_isv_type:4 AND isv_id:[* TO
2000]";
SELECT SUBSTRING(description, 0, 3) AS first_three_letters From
conn WHERE description="sdf";
SELECT * FROM conn WHERE id!="1581" ORDER BY score DESC;
SELECT * FROM conn WHERE id!="1581" ORDER BY score DESC limit 10
offset 10;
SELECT SUBSTRING(description, 0, 4) AS first_fouth_letters From
conn WHERE description="sdfs";

---------------------------------------------------------------

说明,其中conn 对应name,id|nick|isv_id| description
 对应schema中的域

limit ~ rows

offset ~ start

solrflux 文法-语法-抽象语法树参考 grammar/Solral.g,

可以实现学习下 antlr 基本原理

http://www.ibm.com/developerworks/cn/java/j-lo-antlr/index.html?ca=drs-

然后 下载 antlrwork 对句法、文法等编辑、测试

http://openjdk.java.net/projects/compiler-grammar/antlrworks/index.html

时间: 2024-12-02 11:24:08

Sql Support within Solr-类Sql的solr搜索实现(1)的相关文章

ASP.NETR把Excel导入SQL数据库的自定义类

ASP.NETR把Excel导入SQL数据库的自定义类 以下是引用片段:public class SaveToSql {   public string strNewCodeId = string.Empty;   public string strNewCode = string.Empty;   public string strNewDes = string.Empty;   public string strOldCodeId = string.Empty;   public strin

MS SQL Server MFC DAO 类和 MFC ODBC 类:我使用哪个类集?

odbc|server MS SQL Server MFC DAO 类和 MFC ODBC 类:我使用哪个类集?这篇文章详细讲述了 Microsoft Jet 如何使用 ODBC 检索服务器数据.对于所有用 DAO 编写重要服务器应用程序的人,这都不失为一篇必读文章."ODBC:Architecture,Performance,and Tuning",作者:Lambert.Colleen. 本白皮书提供对 ODBC 工作方式的良好概述,并以现实.有用的方式讲述了性能问题. 结论 MFC

连接SQL SERVER的公共类(转)

server 连接SQL SERVER的公共类    blestwq(原作)    '*****************************************************************************************************'//开始日期:2002年5月27日'//结束日期:2002年5月27日'*********************************************************************

连接SQL SERVER的公共类VB.NET

本文介绍连接SQL SERVER的公共类VB.NET. *************************************************************************'//开始日期:2002年5月27日 '//结束日期:2002年5月27日 '*********************************************************************** Option Explicit On 'Option Strict On '

原生sql hibernate-用原生sql查询 为什么实体类中存在该字段,但为什么还是报错列名无效

问题描述 用原生sql查询 为什么实体类中存在该字段,但为什么还是报错列名无效 这是dao层 ds = HibernateDataSource.getHibernateDataSource(); session = ds.getSession(); String sql1="SELECT CHANNEL_ID FROM JC_CHANNEL WHERE PARENT_ID='"+ channelId + "'"; SQLQuery sqlQuery1 = sessi

asp.net 与 Oracle,SQL Server,Access 数据库类(1/8)

文章提供这款数据库教程连接代码是一款asp教程.net 与 oracle,sql server,access 数据库类哦, 如果你是asp.net教程开发者那你就爽了啊,这是一款利用了.net可以与oracle,sql server,access 进行连接哦,如果你用其这一种数据库就可以直接使用了,同时也解决了关于各种数据库连接问题. using system; using system.collections; using system.collections.specialized; usi

SQL SERVER数据操作类代码_MsSql

复制代码 代码如下: using System; using System.Data; using System.Configuration; using System.Web; using System.Web.Security; using System.Web.UI; using System.Web.UI.WebControls; using System.Web.UI.WebControls.WebParts; using System.Web.UI.HtmlControls; usi

SQL SERVER数据操作类代码

复制代码 代码如下: using System; using System.Data; using System.Configuration; using System.Web; using System.Web.Security; using System.Web.UI; using System.Web.UI.WebControls; using System.Web.UI.WebControls.WebParts; using System.Web.UI.HtmlControls; usi

第三篇——第二部分——第五文 配置SQL Server镜像——域环境SQL Server镜像日常维护

原文:第三篇--第二部分--第五文 配置SQL Server镜像--域环境SQL Server镜像日常维护 本文接上面两篇搭建镜像的文章: 第三篇--第二部分--第三文 配置SQL Server镜像--域环境:http://blog.csdn.net/dba_huangzj/article/details/28904503第三篇--第二部分--第四文 配置SQL Server镜像--非域环境:http://blog.csdn.net/dba_huangzj/article/details/276