`

c++中使用boost库在共享内存中存储map

    博客分类:
  • C++
阅读更多
boost库中的interprocess包可以在共享内存中创建map等复杂类型的数据,
但是不能用std::map,主要原因时其中的指针用的绝对位置,而非相对的
用boost的map,vector等类型,必须显示的指定allocator,因而复杂了不少。

代码小而全的一个实现:http://blog.csdn.net/dx2880/article/details/7315761


我在学习的过程中参考了错误的代码,走了不少弯路。这里贴出的示例主要是将
创建共享内存  和 使用共享内存中的数据  两部分分离成为了两个程序,更符合一般的使用场景(但其实类定义应该引用一个文件):

注意:经测试,在创建共享内存的程序中修改Item类定义,比如在最后新加一个int tmp; 变量,  使用共享内存的程序在不该把Item类定义的情况下仍然可以正常运行(但是估计只适用于map,vector作为容器时不行)



老规矩,先看运行结果:
  • 第一次运行创建共享内存的程序,可以正常创建;
  • 第二次运行创建共享内存的程序,因为已经存在该名字的共享内存,所以抛出异常
  • 第一次运行使用共享内存的程序,可以正常使用,并删除该共享内存
  • 第一次运行使用共享内存的程序,因为已经删除了该共享内存,所以抛出异常





最后附上完整程序:
编译(注意需要修改boost库的路径)
boost_path="/home/colinliang/ThirdParty/boost_1_65_1"


#注意, -lrt必须放到最后!!! 因为managed_shared_mem_use_map.cpp 要用到该库,,这个书写顺序会改变链接顺序!!! 
#参见 https://stackoverflow.com/questions/43052020/undefined-reference-to-shm-open-even-while-compiling-with-pthread-lrt
#It makes a difference where in the command you write this option; the linker searches and processes libraries and object files in the order they are specified. Thus, ‘foo.o -lz bar.o’ searches library ‘z’ after file foo.o but before bar.o. If bar.o refers to functions in ‘z’, those functions may not be loaded.
g++ -std=c++0x -L/lib   -I $boost_path managed_shared_mem_use_map.cpp -o exe_managed_shared_mem_use_map -pthread -lrt

g++ -std=c++0x -L/lib   -I $boost_path managed_shared_mem_use_map__read_existing.cpp -o exe_managed_shared_mem_use_map__read_existing -pthread -lrt



创建共享内存  managed_shared_mem_use_map.cpp:
/**  在共享内存中使用 boost 的map,  ---创建共享内存
 原始代码有个致命的错误——存储的Value中用来std::string!! 会导致segment fault
 * 代码来自: http://blog.csdn.net/nellson/article/details/50681103
 * 官方文档: http://www.boost.org/doc/libs/1_65_1/doc/html/interprocess.html
 *
 更复杂的例子,比如 map中嵌套vector, 以及 boost::unordered_map 的使用 等
 请参见 http://www.boost.org/doc/libs/1_65_1/doc/html/interprocess/allocators_containers.html#interprocess.allocators_containers.containers_explained.containers_of_containers

 * 需要添加的库:https://stackoverflow.com/questions/7985236/c-boost-libraries-shared-memory-object-undefined-reference-to-shm-open
 * 		链接时需要添加 rt 库,方法为  g++ -L /lib -lrt
 */

//#include <boost/interprocess/shared_memory_object.hpp>
//#include <boost/interprocess/mapped_region.hpp>
#include <boost/interprocess/managed_shared_memory.hpp>
#include <boost/interprocess/allocators/allocator.hpp>
#include <boost/interprocess/containers/map.hpp>
#include <boost/interprocess/containers/vector.hpp>
#include <boost/interprocess/containers/string.hpp>

#include <functional>
#include <cstdlib>
#include <utility>
#include <sstream>
#include <stdio.h>
#include <stdlib.h>
#include <exception>
#include <sys/mman.h>
#include <sys/stat.h>
#include <fcntl.h>  
#include <string>
#include <iostream>

using namespace boost::interprocess;
//Typedefs of allocators and containers
typedef managed_shared_memory::segment_manager segment_manager_t;
typedef allocator<void, segment_manager_t> void_allocator;
typedef allocator<int, segment_manager_t> int_allocator;
typedef vector<int, int_allocator> int_vector;
typedef allocator<int_vector, segment_manager_t> int_vector_allocator;
typedef vector<int_vector, int_vector_allocator> int_vector_vector;
typedef allocator<char, segment_manager_t> char_allocator;
typedef basic_string<char, std::char_traits<char>, char_allocator> char_string;

using std::string;

class Item {
public:
	Item(const void_allocator& alloc, const char* name = "", int id = 0, int size = 0) :
			id(id), size(size), name(name, alloc) {
	}
	~Item() {
	}

	int id;
	int size;
	char_string name; //注意所有需要动态分配内存的变量,都只能用boost 的allocator进行内存分配
};

typedef char_string KeyType;
typedef Item MappedType;
typedef std::pair<const char_string, Item> ValueType;

typedef allocator<ValueType, managed_shared_memory::segment_manager> ShmemAllocator;

typedef map<KeyType, MappedType, std::less<KeyType>, ShmemAllocator> MyMap;

int main() {
	try {
		// init
		managed_shared_memory segment(create_only, "SharedMemory", 65536); //注意这里必须指定共享内存的大小

		const void_allocator alloc_inst(segment.get_segment_manager());

		MyMap * mymap = segment.construct < MyMap > ("MyMap")(std::less<KeyType>(), alloc_inst);
		MyMap * mymap2 = segment.construct < MyMap > ("MyMap2")(std::less<KeyType>(), alloc_inst); //可以构建两个,但名称不能一样,否则会产生异常boost::interprocess_exception::library_error

		KeyType key(alloc_inst);
		Item v(alloc_inst);
		for (int i = 0; i < 5; ++i) {
			key = (std::string("n") + std::to_string(i)).c_str();
			v.id = i * 10;
			v.size = -i;
			v.name = (std::string("n") + std::to_string(i)).c_str();

			mymap->insert(ValueType(key, v));
		}

		MyMap* mymap_for_use = segment.find < MyMap > ("MyMap").first;
		long int r = segment.find < MyMap > ("MyMap").second;
		printf("result of find map in shared-memory: %ld\n", r);

		printf("key-values in shared memory: \n");
		for (MyMap::iterator it = mymap_for_use->begin(); it != mymap_for_use->end(); it++) {
			const auto& item = it->second;
			printf("\tkey: %s, item.id: %d, item.size: %d, item.name: %s\n", it->first.c_str(), item.id, item.size,
					item.name.c_str());
		}

		//shared_memory_object::remove("SharedMemory");
	} catch (const std::exception & e) {
		printf("Exception:%s\n", e.what());
		//shared_memory_object::remove("SharedMemory");
	}

	return 0;

}




使用共享内存 managed_shared_mem_use_map__read_existing.cpp:
/**  在共享内存中使用 boost 的map,  ----使用已经存在的共享内存
 原始代码有个致命的错误——存储的Value中用来std::string!! 会导致segment fault
 * 代码来自: http://blog.csdn.net/nellson/article/details/50681103
 * 官方文档: http://www.boost.org/doc/libs/1_65_1/doc/html/interprocess.html
 *
 更复杂的例子,请参见http://www.boost.org/doc/libs/1_65_1/doc/html/interprocess/allocators_containers.html
 中的“Containers of containers”一节

 * 需要添加的库:https://stackoverflow.com/questions/7985236/c-boost-libraries-shared-memory-object-undefined-reference-to-shm-open
 * 		链接时需要添加 rt 库,方法为  g++ -L /lib -lrt
 */
//#include <boost/interprocess/shared_memory_object.hpp>
//#include <boost/interprocess/mapped_region.hpp>
#include <boost/interprocess/managed_shared_memory.hpp>
#include <boost/interprocess/allocators/allocator.hpp>
#include <boost/interprocess/containers/map.hpp>
#include <boost/interprocess/containers/vector.hpp>
#include <boost/interprocess/containers/string.hpp>

#include <functional>
#include <cstdlib>
#include <utility>
#include <sstream>
#include <stdio.h>
#include <stdlib.h>
#include <exception>
#include <sys/mman.h>
#include <sys/stat.h>
#include <fcntl.h>  
#include <string>
#include <iostream>

using namespace boost::interprocess;
//Typedefs of allocators and containers
typedef managed_shared_memory::segment_manager segment_manager_t;
typedef allocator<void, segment_manager_t> void_allocator;
typedef allocator<int, segment_manager_t> int_allocator;
typedef vector<int, int_allocator> int_vector;
typedef allocator<int_vector, segment_manager_t> int_vector_allocator;
typedef vector<int_vector, int_vector_allocator> int_vector_vector;
typedef allocator<char, segment_manager_t> char_allocator;
typedef basic_string<char, std::char_traits<char>, char_allocator> char_string;

using std::string;

class Item {
public:
	Item(const void_allocator& alloc, const char* name = "", int id = 0, int size = 0) :
			id(id), size(size), name(name, alloc) {
	}
	~Item() {
	}

	int id;
	int size;
	char_string name; //注意所有需要动态分配内存的变量,都只能用boost 的allocator进行内存分配
};

typedef char_string KeyType;
typedef Item MappedType;
typedef std::pair<const char_string, Item> ValueType;

typedef allocator<ValueType, managed_shared_memory::segment_manager> ShmemAllocator;

typedef map<KeyType, MappedType, std::less<KeyType>, ShmemAllocator> MyMap;

int main() {
	try {
		//shared_memory_object::remove("SharedMemory");
		// init
		managed_shared_memory segment(open_only, "SharedMemory");

		MyMap* mymap_for_use = segment.find < MyMap > ("MyMap").first;
		long int r = segment.find < MyMap > ("MyMap").second;
		printf("result of find map in shared-memory: %ld\n", r);

		printf("key-values in shared memory: \n");
		for (MyMap::iterator it = mymap_for_use->begin(); it != mymap_for_use->end(); it++) {
			const auto& item = it->second;
			printf("\tkey: %s, item.id: %d, item.size: %d, item.name: %s\n", it->first.c_str(), item.id, item.size,
					item.name.c_str());
		}
		

		shared_memory_object::remove("SharedMemory");
	} catch (const std::exception & e) {
		printf("Exception:%s\n", e.what());
		shared_memory_object::remove("SharedMemory");
	}

	return 0;

}

  • 大小: 91 KB
分享到:
评论

相关推荐

    Boost程序库完全开发指南——深入C++“准”标准库高清版

    ### Boost程序库完全开发指南——...总之,《Boost程序库完全开发指南》不仅是一本介绍Boost库使用的书籍,更是一部深入探讨C++“准”标准库的宝典。无论是初学者还是有经验的开发者,都能从中获得宝贵的指导和启示。

    基于stl共享内存,可以像使用STL容器一样使用共享内存

    在标题和描述中提到的"基于stl共享内存,可以像使用STL容器一样使用共享内存",指的是通过设计一个自定义的内存分配器(Allocator),使得STL容器如vector、list、map等能够在共享内存上进行操作。这种方式的优势...

    boost官方pdf文档

    Boost.Container库提供了多种容器,如vector、list、map等,它们在某些方面比标准库中的容器更强大,比如支持内存池技术,提高内存分配效率,同时还有非移动性的容器,适用于需要保持元素顺序的场景。 7. `...

    Boost::Serialization存储C++对象

    通过压缩包中的12个项目,开发者可以学习如何在实践中应用这些知识点,逐步掌握Boost.Serialization的使用,从而提高C++程序的灵活性和可维护性。每个项目可能涵盖不同的主题,如基本序列化、多态对象、模板类序列化...

    boost-STL.rar_Boost_C++标准库_STL_c 标准库_chm

    9. **容器适配器**:比如flat_map和flat_set,它们提供了类似于map和set的功能,但底层存储结构更像vector,从而在某些场景下提供更好的性能。 10. **并发容器**:如concurrent_queue和concurrent_bounded_channel...

    boost程序库完全开发指南深入c++准标准库第3版-第5章

    《Boost程序库完全开发指南:深入C++准标准库第3版》是C++开发者的重要参考资料,特别是对于想要深入理解并使用Boost库的程序员来说,它提供了全面且深入的指导。Boost库是C++社区的一个重要贡献,它包含了一系列高...

    file_内存映射_C++_

    在C++中,内存映射文件(Memory-Mapped File)是通过`&lt;fstream&gt;`库的`std::map_file`或`boost::interprocess::mapped_file_source`等类来实现的。这种方法将文件内容直接映射到进程的虚拟地址空间,使得程序可以像...

    boost 1.52.0

    在"boost 1.52.0"版本中,包含了众多经过严格测试和广泛使用的库组件,这些组件能够帮助开发者提高代码质量、效率和可维护性。 1. **多线程支持**:Boost.Thread库提供了多线程编程的支持,包括线程创建、同步原语...

    C++ 内存管理算法和实现

    6. **STL容器的内存管理**:标准模板库(STL)中的容器如`std::vector`、`std::list`和`std::map`等,它们内部管理自己的内存,用户无需直接使用`new`和`delete`。这些容器会根据需要动态调整大小,并在不再需要时...

    Boost视频教程

    在多线程编程方面,Boost.Thread库提供了线程管理、同步原语(如互斥量、条件变量)以及线程安全的容器,使得在C++中编写并发程序变得更加便捷。 此外,Boost还包含了一些高级特性,如Boost.Lambda,它允许在表达式...

    c++ stl线程安全

    在C++编程中,STL(Standard Template Library,标准模板库)是一组高效、泛型的容器、迭代器、算法和函数对象,极大地提升了代码的可重用性和效率。然而,当涉及到多线程环境时,STL并非完全线程安全的。这意味着在...

    C++类库接口说明文档

    7. **网络编程**:虽然C++标准库中没有内置的网络编程接口,但可以使用第三方库如Boost.Asio或Poco库进行网络通信。 8. **继承图谱**:文档中的继承图谱有助于理解类与类之间的关系,展示类的层次结构和多态特性。...

    C++面试题整理.rar

    面试中,C++的知识点通常包括语法特性、面向对象编程、STL(标准模板库)、内存管理、异常处理、模板元编程、多线程、算法和数据结构等。以下是对这些常见面试题的详细解析: 1. **C++基础语法**:面试中可能涉及的...

    消息处理引擎11月15日版(c++源码)

    C++中,可以使用STL容器(如vector和map)以及自定义数据结构来存储解析后的消息。此外,C++标准库中的string和stringstream等工具对于字符串操作和格式化非常有用。 解析后的消息需要进行路由,即决定它们应该被...

    c++读取配置文件

    - **动态链接库(DLL)**:在Windows操作系统中,DLL是可被多个程序同时使用的代码和数据的共享库。在本案例中,可能包含用于读取配置文件的特定功能。 2. **读取配置文件的步骤** - **打开文件**:使用`fstream`库...

    C++ Multithreading Cookbook_cookbook_C++_multit_

    4. **线程局部存储**:使用`std::thread_local`关键字,可以在每个线程中创建具有独立实例的变量,这对于实现线程特定的数据存储非常有用。 5. **线程池**:通过预先创建一组线程,线程池可以提高程序效率,减少...

    C++资源管理器源程序.zip

    在C++编程中,资源管理是一项至关重要的任务,因为它涉及到内存、文件、数据库连接等的高效使用和安全释放。"C++资源管理器源程序"可能是一个用于学习或实际项目中的工具,它允许用户查看、操作和管理各种类型的资源...

Global site tag (gtag.js) - Google Analytics