Start line:  
End line:  

Snippet Preview

Snippet HTML Code

Stack Overflow Questions
 package org.apache.solr.update.processor;
 
 /*
  * Licensed to the Apache Software Foundation (ASF) under one or more
  * contributor license agreements.  See the NOTICE file distributed with
  * this work for additional information regarding copyright ownership.
  * The ASF licenses this file to You under the Apache License, Version 2.0
  * (the "License"); you may not use this file except in compliance with
  * the License.  You may obtain a copy of the License at
 *
 *     http://www.apache.org/licenses/LICENSE-2.0
 *
 * Unless required by applicable law or agreed to in writing, software
 * distributed under the License is distributed on an "AS IS" BASIS,
 * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
 * See the License for the specific language governing permissions and
 * limitations under the License.
 */
Identifies the language of a set of input fields using http://code.google.com/p/language-detection

See http://wiki.apache.org/solr/LanguageDetection

Since:
3.5
  
      SolrQueryResponse rspUpdateRequestProcessor next) {
    super(reqrspnext);
  }
  protected List<DetectedLanguagedetectLanguage(String content) {
    if (content.trim().length() == 0) { // to be consistent with the tika impl?
      .debug("No input text to detect language from, returning empty list");
      return Collections.emptyList();
    }
    
    try {
      Detector detector = DetectorFactory.create();
      detector.append(content);
      ArrayList<Languagelanglist = detector.getProbabilities();
      ArrayList<DetectedLanguagesolrLangList = new ArrayList<DetectedLanguage>();
      for (Language llanglist) {
        solrLangList.add(new DetectedLanguage(l.langl.prob));
      }
      return solrLangList;
    } catch (LangDetectException e) {
      .debug("Could not determine language, returning empty list: "e);
      return Collections.emptyList();
    }
  }
New to GrepCode? Check out our FAQ X