您可以在创建多元索引时指定索引预排序和在使用多元索引查询数据时指定排序方式,以及在获取返回结果时使用limit和offset或者使用token进行翻页。
索引预排序
多元索引默认按照设置的索引预排序(IndexSort)方式进行排序,使用多元索引查询数据时,IndexSort决定了数据的默认返回顺序。
在创建多元索引时,您可以自定义IndexSort,如果未自定义IndexSort,则IndexSort默认为主键排序。
查询时指定排序方式
只有enable_sort_and_agg设置为True的字段才能进行排序。
在每次查询时,可以指定排序方式,多元索引支持如下四种排序方式(Sorter)。您也可以使用多个Sorter,实现先按照某种方式排序,再按照另一种方式排序的需求。
- ScoreSort
按照查询结果的相关性(BM25算法)分数进行排序,适用于有相关性的场景,例如全文检索等。注意 如果需要按照相关性打分进行排序,必须手动设置ScoreSort,否则会按照索引设置的IndexSort进行排序。
sort = Sort( sorters=[ScoreSort(sort_order=SortOrder.DESC)] ) client.search( table_name, index_name, SearchQuery(query, sort=sort, limit=100, get_total_count=True), ColumnsToGet(return_type=ColumnReturnType.ALL) )
- PrimaryKeySort
按照主键进行排序。
sort = Sort( sorters=[PrimaryKeySort(sort_order=SortOrder.DESC)] ) client.search( table_name, index_name, SearchQuery(query, sort=sort, limit=100, get_total_count=True), ColumnsToGet(return_type=ColumnReturnType.ALL) ) = PrimaryKeySort(sort_order=SortOrder.DESC)
- FieldSort
按照某列的值进行排序。
基础类型的字段排序:sort = Sort( sorters=[FieldSort('l', SortOrder.ASC)] ) client.search( table_name, index_name, SearchQuery(query, sort=sort, limit=100, get_total_count=True), ColumnsToGet(return_type=ColumnReturnType.ALL) )
Nested类型的字段排序:sort = Sort( sorters=[ FieldSort( 'n.nl', sort_order=SortOrder.ASC, nested_filter=NestedFilter('n', RangeQuery('n.nl', range_from=150, range_to=200)) ) ] ) client.search( table_name, index_name, SearchQuery(query, sort=sort, limit=100, get_total_count=True), ColumnsToGet(return_type=ColumnReturnType.ALL) )
先按照某列的值进行排序,再按照另一列的值进行排序。
sort = Sort( sorters=[ FieldSort('a', SortOrder.ASC), FieldSort('b', SortOrder.ASC) ] ) client.search( table_name, index_name, SearchQuery(query, sort=sort, limit=100, get_total_count=True), ColumnsToGet(return_type=ColumnReturnType.ALL) )
- GeoDistanceSort
根据地理点距离进行排序。
sort = Sort( sorters=[GeoDistanceSort('g', ['32.5,116.5', '32.0,116.0'], sort_order=SortOrder.DESC, sort_mode=SortMode.MAX)] ) client.search( table_name, index_name, SearchQuery(query, sort=sort, limit=100, get_total_count=True), ColumnsToGet(return_type=ColumnReturnType.ALL) )
翻页方式
在获取返回结果时,可以使用limit和offset或者使用token进行翻页。
- 使用limit和offset进行翻页
当需要获取的返回结果行数小于10000行时,可以使用limit和offset进行翻页,即limit+offset<=10000,其中limit的最大值为100。说明 如果需要提高limit的上限,请参见如何将多元索引Search接口查询数据的limit提高到1000。
如果使用此方式进行翻页时未设置limit和offset,则limit的默认值为10,offset的默认值为0。
query = RangeQuery('k', 'key100', 'key500', include_lower=False, include_upper=False) search_response = client.search( table_name, index_name, SearchQuery(query, offset=100, limit=100, get_total_count=True), ColumnsToGet(return_type=ColumnReturnType.ALL) )
- 使用token进行翻页
由于使用token进行翻页时翻页深度无限制,当需要进行深度翻页时,推荐使用token进行翻页。
当符合查询条件的数据未读取完时,服务端会返回next_token,此时可以使用next_token继续读取后面的数据。
使用token进行翻页时默认只能向后翻页。由于在一次查询的翻页过程中token长期有效,您可以通过缓存并使用之前的token实现向前翻页。
使用token翻页后的排序方式和上一次请求的一致,无论是系统默认使用IndexSort还是自定义排序,因此设置了token不能再设置Sort。另外使用token后不能设置offset,只能依次往后读取,即无法跳页。
注意 由于含有Nested类型字段的多元索引不支持索引预排序,如果使用含有Nested类型字段的多元索引查询数据且需要翻页,则必须在查询条件中指定数据返回的排序方式,否则当符合查询条件的数据未读取完时,服务端不会返回next_token。query = MatchAllQuery() all_rows = [] next_token = None # first round search_response = client.search(table_name, index_name, SearchQuery(query, next_token=next_token, limit=100, get_total_count=True), columns_to_get=ColumnsToGet(['k', 't', 'g', 'ka', 'la'], ColumnReturnType.SPECIFIED)) all_rows.extend(search_response.rows) # loop while search_response.next_token: search_response = client.search(table_name, index_name, SearchQuery(query, next_token=search_response.next_token, sort=None, limit=100, get_total_count=True), columns_to_get=ColumnsToGet(['k', 't', 'g', 'ka', 'la'], ColumnReturnType.SPECIFIED)) all_rows.extend(search_response.rows) print('Total rows:%d' % len(all_rows))
在文档使用中是否遇到以下问题
更多建议
匿名提交