假设我们有一个数据结构,它是一个键值映射,其中键本身也是一个键值映射。例如:
map<map<string,string>>, string>
现在,假设我们要查询此映射中与键的键值的某个子集匹配的所有顶级键/值。例:
map = { { "k1" : "v1", "k2 : "v2" } : "value1",
{ "k1" : "v3", "k2 : "v4" } : "value2",
{ "k1" : "v1", "k2 : "v5" } : "value3"
}
我们的查询是“给我所有的键值,其中键包含{ "k1" : "v1" }
,它将返回第一个和第三个值。同样,查询{ "k1" : "v3", "k2" : "v4" }
将返回所有具有k1=v3
和k2=v4
的键值,产生第二个值。显然我们可以搜索每个查询的完整地图,但我正在寻找比这更有效的东西。
我环顾四周,但找不到一个高效,易用的C ++解决方案。在查询键值对的子集时,Boost multi_index似乎没有这种灵活性。
有些数据库有办法创建可以完全回答这类查询的索引。例如,Postgres有GIN指数(广义倒排索引),可以让你问
SELECT * FROM table WHERE some_json_column @> '{"k1":"v1","k2":"v2"}'
-- returns all rows that have both k1=v1 and k2=v2
但是,我正在寻找一种只在C ++中没有数据库的解决方案。是否有任何库或数据结构可以完成这样的事情?如果没有,有关自定义实现的一些指示?
我会留下数据库索引类比。在这个类比中,索引搜索不使用通用的k = v类型搜索,而只是使用构成索引的元素(通常是列)的值的元组。然后,数据库将恢复扫描其他不在索引中的k = v参数。
在这个类比中,您将拥有固定数量的键,可以表示为数组或字符串(固定大小)。好消息是,在键上设置全局顺序是微不足道的,并且由于std::map::upper_bound
方法,在部分键之后立即找到迭代器也是微不足道的。
所以获得一个完整的密钥是立即的:只需用find
,at
或operator []
提取它。获取部分密钥的所有元素仍然很简单:
upper_bound
开始在部分键上方的迭代器但这需要您将初始类型更改为std::map<std::array<string, N>, string>
您可以使用std::map<string, string>
作为输入值在此容器上构建API,从中提取实际的完整或部分密钥,并按上述方式进行迭代,仅保留与索引中不存在的k,v对匹配的元素。
您可以使用std::includes
检查键映射是否包含另一个查询键值对的映射。我不确定如何避免检查每个键映射。也许其他答案有更好的主意。
template <typename MapOfMapsIt, typename QueryMapIt>
std::vector<MapOfMapsIt> query_keymap_contains(
MapOfMapsIt mom_fst,
MapOfMapsIt mom_lst,
QueryMapIt q_fst,
QueryMapIt q_lst)
{
std::vector<MapOfMapsIt> out;
for(; mom_fst != mom_lst; ++mom_fst)
{
const auto key_map = mom_fst->first;
if(std::includes(key_map.begin(), key_map.end(), q_fst, q_lst))
out.push_back(mom_fst);
}
return out;
}
用法:
typedef std::map<std::string, std::string> StrMap;
typedef std::map<StrMap, std::string> MapKeyMaps;
MapKeyMaps m = {{{{"k1", "v1"}, {"k2", "v2"}}, "value1"},
{{{"k1", "v3"}, {"k2", "v4"}}, "value2"},
{{{"k1", "v1"}, {"k2", "v5"}}, "value3"}};
StrMap q1 = {{"k1", "v1"}};
StrMap q2 = {{"k1", "v3"}, {"k2", "v4"}};
auto res1 = query_keymap_contains(m.begin(), m.end(), q1.begin(), q1.end());
auto res2 = query_keymap_contains(m.begin(), m.end(), q2.begin(), q2.end());
std::cout << "Query1: ";
for(auto i : res1) std::cout << i->second << " ";
std::cout << "\nQuery2: ";
for(auto i : res2) std::cout << i->second << " ";
输出:
Query1: value1 value3
Query2: value2
我相信不同方法的效率将取决于实际数据。但是,我会考虑将迭代器的“缓存”设置为特定"kX","vY"
对的外部地图元素,如下所示:
using M = std::map<std::map<std::string, std::string>, std::string>;
M m = {
{ { { "k1", "v1" }, { "k2", "v2" } }, "value1" },
{ { { "k1", "v3" }, { "k2", "v4" } }, "value2" },
{ { { "k1", "v1" }, { "k2", "v5" } }, "value3" }
};
std::map<M::key_type::value_type, std::vector<M::iterator>> cache;
for (auto it = m.begin(); it != m.end(); ++it)
for (const auto& kv : it->first)
cache[kv].push_back(it);
现在,您基本上需要获取所有搜索到的"kX","vY"
对并找到它们的缓存迭代器的交集:
std::vector<M::key_type::value_type> find_list = { { "k1", "v1" }, { "k2", "v5" } };
std::vector<M::iterator> found;
if (find_list.size() > 0) {
auto it = find_list.begin();
std::copy(cache[*it].begin(), cache[*it].end(), std::back_inserter(found));
while (++it != find_list.end()) {
const auto& temp = cache[*it];
found.erase(std::remove_if(found.begin(), found.end(),
[&temp](const auto& e){ return std::find(temp.begin(), temp.end(), e) == temp.end(); } ),
found.end());
}
}
最终输出:
for (const auto& it : found)
std::cout << it->second << std::endl;
在这种情况下给value3
。
现场演示:https://wandbox.org/permlink/S9Zp8yofSvjfLokc。
请注意,交叉步骤的复杂性非常大,因为缓存的迭代器未排序。如果使用指针,则可以对矢量进行排序或将指针存储在地图中,这样可以更快地找到交点,例如,使用std::set_intersection
。
您可以使用有序查询单个(部分)传递每个元素,尽可能早地返回。从std::set_difference
获取灵感,我们想知道query
是否是data
的子集,它允许我们选择外部地图的条目。
// Is the sorted range [first1, last1) a subset of the sorted range [first2, last2)
template<class InputIt1, class InputIt2>
bool is_subset(InputIt1 first1, InputIt1 last1, InputIt2 first2, InputIt2 last2)
{
while (first1 != last1) {
if (first2 == last2) return false; // Reached the end of data with query still remaing
if (*first1 < *first2) {
return false; // didn't find this query element
} else {
if (! (*first2 < *first1)) {
++first1; // found this query element
}
++first2;
}
}
return true; // reached the end of query
}
// find every element of "map-of-maps" [first2, last2) for which the sorted range [first1, last1) is a subset of it's key
template<class InputIt1, class InputIt2, class OutputIt>
OutputIt query_data(InputIt1 first1, InputIt1 last1, InputIt2 first2, InputIt2 last2, OutputIt d_first)
{
auto item_matches = [=](auto & inner){ return is_subset(first1, last1, inner.first.begin(), inner.first.end()); };
return std::copy_if(first2, last2, d_first, item_matches);
}
std::map
实现为平衡二叉树,具有O(nlgn)查找。你需要的是std::unordered_map
,它实现为哈希表,即O(1)查找。
现在让我改写你的措辞,你想:
我们的查询是“给我所有键值,其中键包含{”k1“:”v1“},它将返回第一个和第三个值。
这意味着:
如果给出的键值对在内部地图中,请将其值返回给我。基本上你需要的是std :: unordered_map擅长的双重查找。
这是一个代码spinet,解决了标准库的问题(不需要花哨的代码)
#include <iostream>
#include <unordered_map>
#include <string>
int main() {
using elemType = std::pair<std::string, std::string>;
using innerMap = std::unordered_map<std::string, std::string>;
using myMap = std::unordered_map<std::string, innerMap>;
auto table = myMap{ { "value1", { {"k1", "v1"}, {"k2", "v2"} } },
{ "value2", { {"k1", "v3"}, {"k2", "v4"} } },
{ "value3", { {"k1", "v1"}, {"k2", "v5"} } } };
//First we set-up a predicate lambda
auto printIfKeyValueFound = [](const myMap& tab, const elemType& query) {
// O(n) for the first table and O(1) lookup for each, O(n) total
for(const auto& el : tab) {
auto it = el.second.find(query.first);
if(it != el.second.end()) {
if(it->second == query.second) {
std::cout << "Element found: " << el.first << "\n";
}
}
}
};
auto query = elemType{"k1", "v1"};
printIfKeyValueFound(table, query);
输出:Value3,Value1
对于任意大小的查询,您可以:
//First we set-up a predicate lambda
auto printIfKeyValueFound = [](const myMap& tab, const std::vector<elemType>& query) {
// O(n) for the first table and O(n) for the query O(1) search
// O(n^2) total
for(const auto& el : tab) {
bool found = true;
for(const auto& queryEl : query) {
auto it = el.second.find(queryEl.first);
if(it != el.second.end() && it->second != queryEl.second) {
found = false;
break;
}
}
if(found)
std::cout << el.first << "\n";
}
};
auto query = std::vector<elemType>{ {"k1", "v1"}, {"k2", "v2"} };
输出值1