doris用sql查询es数组类型数据异常
时间: 2023-09-09 17:14:41
浏览: 93
对于 Elasticsearch 中的数组类型数据,可以使用 Elasticsearch 的查询语法进行查询,也可以使用 SQL 语句进行查询。在 Doris 中使用 SQL 查询 Elasticsearch 数组类型数据时,需要使用 Elasticsearch 的 UDF [函数](https://geek.csdn.net/educolumn/ba94496e6cfa8630df5d047358ad9719?dp_token=eyJ0eXAiOiJKV1QiLCJhbGciOiJIUzI1NiJ9.eyJpZCI6NDQ0MDg2MiwiZXhwIjoxNzA3MzcxOTM4LCJpYXQiOjE3MDY3NjcxMzgsInVzZXJuYW1lIjoid2VpeGluXzY4NjQ1NjQ1In0.RrTYEnMNYPC7AQdoij4SBb0kKEgHoyvF-bZOG2eGQvc&spm=1055.2569.3001.10083)来操作数组类型数据。
例如,如果 Elasticsearch 中的[文档](https://geek.csdn.net/edu/300981ef51993cfd737d329c71ba77f9?dp_token=eyJ0eXAiOiJKV1QiLCJhbGciOiJIUzI1NiJ9.eyJpZCI6NDQ0MDg2MiwiZXhwIjoxNzA3MzcxOTM4LCJpYXQiOjE3MDY3NjcxMzgsInVzZXJuYW1lIjoid2VpeGluXzY4NjQ1NjQ1In0.RrTYEnMNYPC7AQdoij4SBb0kKEgHoyvF-bZOG2eGQvc&spm=1055.2569.3001.10083)包含一个名为 "tags" 的数组类型字段,可以使用以下 SQL 语句查询包含特定标签的[文档](https://geek.csdn.net/edu/300981ef51993cfd737d329c71ba77f9?dp_token=eyJ0eXAiOiJKV1QiLCJhbGciOiJIUzI1NiJ9.eyJpZCI6NDQ0MDg2MiwiZXhwIjoxNzA3MzcxOTM4LCJpYXQiOjE3MDY3NjcxMzgsInVzZXJuYW1lIjoid2VpeGluXzY4NjQ1NjQ1In0.RrTYEnMNYPC7AQdoij4SBb0kKEgHoyvF-bZOG2eGQvc&spm=1055.2569.3001.10083):
SELECT * FROM es_table WHERE ARRAY_CONTAINS(tags, 'tag1')
其中,ARRAY_CONTAINS 是 Elasticsearch 提供的 UDF [函数](https://geek.csdn.net/educolumn/ba94496e6cfa8630df5d047358ad9719?dp_token=eyJ0eXAiOiJKV1QiLCJhbGciOiJIUzI1NiJ9.eyJpZCI6NDQ0MDg2MiwiZXhwIjoxNzA3MzcxOTM4LCJpYXQiOjE3MDY3NjcxMzgsInVzZXJuYW1lIjoid2VpeGluXzY4NjQ1NjQ1In0.RrTYEnMNYPC7AQdoij4SBb0kKEgHoyvF-bZOG2eGQvc&spm=1055.2569.3001.10083),用于判断数组中是否包含指定元素。需要注意的是,使用 UDF [函数](https://geek.csdn.net/educolumn/ba94496e6cfa8630df5d047358ad9719?dp_token=eyJ0eXAiOiJKV1QiLCJhbGciOiJIUzI1NiJ9.eyJpZCI6NDQ0MDg2MiwiZXhwIjoxNzA3MzcxOTM4LCJpYXQiOjE3MDY3NjcxMzgsInVzZXJuYW1lIjoid2VpeGluXzY4NjQ1NjQ1In0.RrTYEnMNYPC7AQdoij4SBb0kKEgHoyvF-bZOG2eGQvc&spm=1055.2569.3001.10083)查询数组类型数据可能会影响查询性能,需要根据实际情况进行优化。
相关问题
doris连接外表查询elasticsearch的array字段问题
如果你想在 Doris 中连接外部的 Elasticsearch 查询 array 字段,可以按照以下步骤操作:
1. 确保你已经安装并配置好了 Doris 和 Elasticsearch。
2. 在 Doris 中创建一个外部表,指定 Elasticsearch 作为数据源,并在表的定义中指定 array 字段的类型为 ARRAY。例如:
CREATE EXTERNAL TABLE es_table (
id INT,
name VARCHAR,
tags ARRAY<STRING>
) ENGINE = elasticsearch
```
doris 数据类型 text
Doris是一