首页 / PYTHON / caffe中两个lmdb的合并 [python]

caffe中两个lmdb的合并 [python]

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了caffe中两个lmdb的合并 [python]，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1193字，纯文字阅读大概需要2分钟。

内容图文

1、安装lmdb

2、Ubuntu 系统命令：pip install lmdb

3、运行代码：combine_lmdb.py

#!/usr/bin/env python2
# -*- coding: utf-8 -*-
"""
Created on Sun Aug 12 17:50:48 2018
@author: Sarah
"""
import lmdb
env1 = lmdb.open("/home/www/www_python/dataset/train_001_lmdb")
env2 = lmdb.open("/home/www/www_python/dataset/train_002_lmdb")
txn1 = env1.begin()
txn2 = env2.begin()
database1 = txn1.cursor()
database2 = txn2.cursor()

env3 = lmdb.open("/home/www/www_python/dataset/train_result_lmdb", map_size=int(1e12))
txn3 = env3.begin(write=True)
print(env3.stat()) 
count =0
for (key, value) in database1:
    # 将数据放到结果数据库事务中
    txn3.put(key, value)
    count += 1
    if(count % 1000 == 0):
        # 将数据写入数据库，必须的，否则数据不会写入到数据库中
        txn3.commit()
        count = 0
        txn3 = env3.begin(write=True)
if(count % 1000 != 0):
    txn3.commit()
    count = 0
    txn3 = env3.begin(write=True)
for (key, value) in database2:
    txn3.put(key, value)
    if(count % 1000 == 0):
        txn3.commit()
        count = 0
        txn3= env3.begin(write=True)
if(count % 1000 != 0):
    txn3.commit()
    count = 0
    txn_3 = env3.begin(write=True)
#查询合并前后的lmdb的数据，确认合并成功
print txn1.stat()[‘entries‘]
print txn2.stat()[‘entries‘]
print txn3.stat()[‘entries‘]
print("success")

 

原文：https://www.cnblogs.com/NealRiver/p/9464332.html

内容总结

以上是互联网集市为您收集整理的caffe中两个lmdb的合并 [python]全部内容，希望文章能够帮你解决caffe中两个lmdb的合并 [python]所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1057105.html

来源：【匿名】