TokenStream.cs
上传用户:zhangkuixh
上传日期:2013-09-30
资源大小:5473k
文件大小:1k
源码类别:

搜索引擎

开发平台:

C#

  1. /*
  2.  * Copyright 2004 The Apache Software Foundation
  3.  * 
  4.  * Licensed under the Apache License, Version 2.0 (the "License");
  5.  * you may not use this file except in compliance with the License.
  6.  * You may obtain a copy of the License at
  7.  * 
  8.  * http://www.apache.org/licenses/LICENSE-2.0
  9.  * 
  10.  * Unless required by applicable law or agreed to in writing, software
  11.  * distributed under the License is distributed on an "AS IS" BASIS,
  12.  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  13.  * See the License for the specific language governing permissions and
  14.  * limitations under the License.
  15.  */
  16. using System;
  17. namespace Lucene.Net.Analysis
  18. {
  19. /// <summary>A TokenStream enumerates the sequence of tokens, either from
  20. /// fields of a document or from query text.
  21. /// <p>
  22. /// This is an abstract class.  Concrete subclasses are:
  23. /// <ul>
  24. /// <li>{@link Tokenizer}, a TokenStream
  25. /// whose input is a Reader; and
  26. /// <li>{@link TokenFilter}, a TokenStream
  27. /// whose input is another TokenStream.
  28. /// </ul>
  29. /// </summary>
  30. public abstract class TokenStream
  31. {
  32. /// <summary>Returns the next token in the stream, or null at EOS. </summary>
  33. public abstract Token Next();
  34. /// <summary>Releases resources associated with this stream. </summary>
  35. public virtual void  Close()
  36. {
  37. }
  38. }
  39. }