栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

ElasticSearch学习

ElasticSearch学习

一.什么是ElasticSearch

Elasticsearch 是一个建立在全文搜索引擎 Apache Lucene™ 基础上的搜索引擎,可以说 Lucene (一个开放源代码的全文检索引擎工具包)是当今最先进,最高效的全功能开源搜索引擎框架。

二.Elasticsearch的一般特性

Elasticsearch可扩展高达PB级的结构化和非结构化数据。
Elasticsearch可以用来替代MongoDB和RavenDB等做文档存储。
Elasticsearch使用非标准化来提高搜索性能。
Elasticsearch是受欢迎的企业搜索引擎之一,目前被许多大型组织使用,如Wikipedia,The Guardian,StackOverflow,GitHub等。

三.Elasticsearch的优点

Elasticsearch是基于Java开发的,这使得它在几乎每个平台上都兼容。
Elasticsearch是实时的,换句话说,一秒钟后,添加的文档可以在这个引擎中搜索得到。
Elasticsearch是分布式的,这使得它易于在任何大型组织中扩展和集成。
通过使用Elasticsearch中的网关概念,创建完整备份很容易。
与Apache Solr相比,在Elasticsearch中处理多租户非常容易。
Elasticsearch使用JSON对象作为响应,这使得可以使用不同的编程语言调用Elasticsearch服务器。
Elasticsearch支持几乎大部分文档类型,但不支持文本呈现的文档类型。

四.Elasticsearch的缺点

Elasticsearch在处理请求和响应数据方面没有多语言和数据格式支持(仅在JSON中可用),与Apache Solr不同,Elasticsearch不可以使用CSV,XML等格式。
Elasticsearch也有一些伤脑的问题发生,虽然在极少数情况下才会发生。

五.为什么要使用ElasticSearch?

字段模糊查询,涉及大数据属性问题 like模糊查询无法对数据列应用索引 只能一条条字符串比对查询,效率非常低下,因此产生一种解决方案:建立数据索引库,采用全文检索的方式进行 全文索引可以将文本进行切分,建立成一个个词条的索引,最后进行检索的优化(检索文本中的每个词与搜索项进行比对)

六.ES使用
1.添加依赖


org.elasticsearch.client
elasticsearch-rest-high-level-client
7.9.2


org.elasticsearch
elasticsearch
7.9.2

2.创建es连接的模板

@Component
@Data
@Slf4j
public class EsTemplate {
    @Value("${es.clusterNodes}")
    private String clusterNodes;//
    @Value("${es.clusterName}")
    private String clusterName;
    @Value("${es.schema}")
    private String schema;//http
    private Boolean clientTransportSniff=false;//是否自动把集群ip信息加入客户端
    @Value("${es.securityUser}")
    private String securityUser;
    @Value("${es.securityPassword}")
    private String securityPassword;
    @Value("${es.connectTimeout}")
    private int connectTimeout;
    @Value("${es.socketTimeout}")
    private int socketTimeout;
    @Value("${es.connectionRequestTimeout}")
    private int connectionRequestTimeout;
    @Value("${es.maxConnectNum}")
    private int maxConnectNum;
    @Value("${es.maxConnectPerRoute}")
    private int maxConnectPerRoute;
    private RestHighLevelClient client;

    @PostConstruct
    public void init(){
        //地址解析
        List hostLists = new ArrayList<>();
        String[] hostList = clusterNodes.split(";");
        for (String addr : hostList) {
            if(StringUtils.isEmpty(addr)){
                continue;
            }
            String[] addrDetail = addr.split(":");
            String host = addrDetail[0];
            String port = addrDetail[1];
            hostLists.add(new HttpHost(host, Integer.parseInt(port), schema));
        }
        HttpHost[] httpHost = hostLists.toArray(new HttpHost[]{});
        //构建连接对象
        RestClientBuilder builder = RestClient.builder(httpHost);
        // 异步连接延时配置
        builder.setRequestConfigCallback(requestConfigBuilder -> {
            requestConfigBuilder.setConnectTimeout(connectTimeout);
            requestConfigBuilder.setSocketTimeout(socketTimeout);
            requestConfigBuilder.setConnectionRequestTimeout(connectionRequestTimeout);
            return requestConfigBuilder;
        });
        // 异步连接数配置
        log.info(securityUser+"_"+securityPassword);
        final CredentialsProvider credentialsProvider = new BasicCredentialsProvider();
        credentialsProvider.setCredentials(AuthScope.ANY, new UsernamePasswordCredentials(securityUser, securityPassword));

        builder.setHttpClientConfigCallback(httpClientBuilder -> {
            httpClientBuilder.setMaxConnTotal(maxConnectNum);
            httpClientBuilder.setMaxConnPerRoute(maxConnectPerRoute);
            //httpClientBuilder.disableAuthCaching();
            httpClientBuilder.setDefaultCredentialsProvider(credentialsProvider);
            return httpClientBuilder;
        });
        client = new RestHighLevelClient(builder);
    }
    @PreDestroy
    public void destory(){
        try {
            client.close();
        } catch (IOException e) {
            log.error("RestHighLevelClient close failed",e);
            throw new SystemException(e);
        }
    }

}

参考连接:
链接:https://www.bootwiki/elasticsearch/elasticsearch-tutorial.html
原文链接:https://blog.csdn.net/weixin_42392859/article/details/86063561

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/760856.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号