TokenStream.java
01 package gate.creole.annic.apache.lucene.analysis;
02 
03 /**
04  * Copyright 2004 The Apache Software Foundation
05  *
06  * Licensed under the Apache License, Version 2.0 (the "License");
07  * you may not use this file except in compliance with the License.
08  * You may obtain a copy of the License at
09  *
10  *     http://www.apache.org/licenses/LICENSE-2.0
11  *
12  * Unless required by applicable law or agreed to in writing, software
13  * distributed under the License is distributed on an "AS IS" BASIS,
14  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
15  * See the License for the specific language governing permissions and
16  * limitations under the License.
17  */
18 
19 import java.io.IOException;
20 
21 /**
22  * A TokenStream enumerates the sequence of tokens, either from fields of a
23  * document or from query text.
24  */
25 public abstract class TokenStream {
26   /** Returns the next token in the stream, or null at EOS. */
27   public abstract Token next() throws IOException;
28 
29   /** Releases resources associated with this stream. */
30   public void close() throws IOException {}
31 }