首页 / JSON / 在c++项目中使用高性能的rapidjson作为json处理库

在c++项目中使用高性能的rapidjson作为json处理库

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了在c++项目中使用高性能的rapidjson作为json处理库，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含6476字，纯文字阅读大概需要10分钟。

内容图文

最近在一个需要高并发的项目中使用到json，最开始使用jsoncpp进行解析和序列化，但是在json数据比较大时jsoncpp会抛异常，在多线程的情况下抛异常的概率更加频繁！后来发现是因为jsoncpp版本比较老，老版本的jsoncpp不是多线程安全的（参考 https://github.com/open-source-parsers/jsoncpp/issues/823）。更新到最新的版本后，处理性能达不到预期，于是查找原因，经过hotspots分析，发现大部分时间消耗在jsoncpp的readValue函数，在一些存在大量float数值的json中解析数值的操作耗时较大。
于是找到了rapidjson，根据benchmark结果看起来不错，经过实际测试发现在40线程的压力测试下相比jsoncpp性能提升10倍左右，一些存在大量float数值的case性能提升更明显！
如下，整理一下rapidjson使用的方法：

通用解析方法放在rapidjson_utils.hpp文件中

#ifndef rapidjson_utils_h__
#define rapidjson_utils_h__
#include "rapidjson/rapidjson.h"
#include "rapidjson/document.h"
#include "rapidjson/pointer.h"
#include "rapidjson/writer.h"
#include "rapidjson/prettywriter.h"
#include "rapidjson/error/en.h"
#include <string>
namespace utils
{
    using std::string;
    static int get_rapidjson_string(const rapidjson::Value& js_in,
        std::string key,
        std::string& value) {
        rapidjson::Pointer pointer(key.c_str());
        if (!pointer.IsValid()) {
            return -1;
        }
        const rapidjson::Value *pValue = rapidjson::GetValueByPointer(js_in, pointer);
        if (NULL == pValue || !pValue->IsString()) {
            return -1;
        }
        value = pValue->GetString();
        return 0;
    }
    static int get_rapidjson_int(const rapidjson::Value& js_in,
        std::string key,
        int& value) {
        rapidjson::Pointer pointer(key.c_str());
        if (!pointer.IsValid()) {
            return -1;
        }
        const rapidjson::Value *pValue = rapidjson::GetValueByPointer(js_in, pointer);
        if (NULL == pValue || !pValue->IsNumber()) {
            return -1;
        }
        value = pValue->GetInt();
        return 0;
    }
    ///< get float number
    static int get_rapidjson_number(const rapidjson::Value& js_in,
        std::string key,
        float& value) {
        rapidjson::Pointer pointer(key.c_str());
        if (!pointer.IsValid()) {
            return -1;
        }
        const rapidjson::Value *pValue = rapidjson::GetValueByPointer(js_in, pointer);
        if (NULL == pValue || !pValue->IsNumber()) {
            return -1;
        }
        rapidjson::Type valueType = pValue->GetType();
        switch (valueType) {
        case rapidjson::Type::kNumberType:
            value = pValue->GetDouble();
            break;
        default:
            return -1;
        }
        return 0;
    }
    static int get_rapidjson_bool(const rapidjson::Value& js_in,
        std::string key,
        bool& value) {
        rapidjson::Pointer pointer(key.c_str());
        if (!pointer.IsValid()) {
            return -1;
        }
        const rapidjson::Value *pValue = rapidjson::GetValueByPointer(js_in, pointer);
        if (NULL == pValue || !pValue->IsBool()) {
            return -1;
        }
        value = pValue->GetBool();
        return 0;
    }
    static void add_member_string(rapidjson::Value& node, string key, string value, rapidjson::Document::AllocatorType &alloc) {
        node.AddMember(rapidjson::Value(key.c_str(), key.length(), alloc).Move(),
            rapidjson::Value(value.c_str(), value.length(), alloc).Move(), alloc);
    }
    static void add_member_int(rapidjson::Value& node, string key, int value,
        rapidjson::Document::AllocatorType &alloc) {
        node.AddMember(rapidjson::Value(key.c_str(), key.length(), alloc).Move(),
            rapidjson::Value(value).Move(), alloc);
    }
    static void add_member_float(rapidjson::Value& node, string key, double value,
        rapidjson::Document::AllocatorType &alloc) {
        node.AddMember(rapidjson::Value(key.c_str(), key.length(), alloc).Move(),
            rapidjson::Value(value).Move(), alloc);
    }
    static void add_member_bool(rapidjson::Value& node, string key, bool value,
        rapidjson::Document::AllocatorType &alloc) {
        node.AddMember(rapidjson::Value(key.c_str(), key.length(), alloc).Move(),
            rapidjson::Value(value).Move(), alloc);
    }
    static string to_string(const rapidjson::Value& v) {
        rapidjson::StringBuffer sb;
        rapidjson::Writer<rapidjson::StringBuffer> writer(sb);
        v.Accept(writer);
        std::string sResult = sb.GetString();
        return sResult;
    }
    static string to_styled_string(const rapidjson::Value& v) {
        rapidjson::StringBuffer sb;
        rapidjson::PrettyWriter<rapidjson::StringBuffer> writer(sb);
        v.Accept(writer);
        std::string s = sb.GetString();
        return s;
    }
} //namespace utils
#endif // rapidjson_utils_h__

测试代码放在rapidjson_example.cpp中

#include <iostream>
#include <fstream>
#include <sstream>
#include <string>
#include "rapidjson_utils.hpp"
using std::string;
int main(int argc, char** argv)
{
    string data = "{\"user\":\"hello\",\"movies\":[{\"name\":\"TENET\",\"like\":10000}],\"song\":{\"暗里着迷\":\"已经播放了3遍\"},\"ratio\":0.98}";
    rapidjson::Document doc;
    rapidjson::ParseResult ok = doc.Parse(data.c_str());
    if (!ok) {
        printf("parse json failure id=%d offset=%d msg=%s\n", doc.GetParseError(), doc.GetErrorOffset(), rapidjson::GetParseError_En(doc.GetParseError()));
        return -1;
    }
    string user;
    utils::get_rapidjson_string(doc, "/user", user);
    printf("user=%s\n", user.c_str());
    ///< 使用迭代器遍历数组
    const rapidjson::Value* pMovies = rapidjson::GetValueByPointer(doc, "/movies");
    if (nullptr != pMovies && pMovies->IsArray() && !pMovies->Empty()) {
        for (rapidjson::Value::ConstValueIterator iter = pMovies->Begin(); iter != pMovies->End(); iter++) {
            string name;
            int like;
            utils::get_rapidjson_string(*iter, "/name", name);
            utils::get_rapidjson_int(*iter, "/like", like);
            printf("movie=%s like=%d\n", name.c_str(), like);
        }
    }
    const rapidjson::Value* pSong = rapidjson::GetValueByPointer(doc, "/song");
    if (nullptr != pSong && pSong->IsObject() && !pSong->ObjectEmpty()) {
        ///< 使用迭代器遍历object
        const rapidjson::Value& song = *pSong;
        for (rapidjson::Value::ConstMemberIterator miter = song.MemberBegin(); miter != song.MemberEnd(); miter++) {
            const rapidjson::Value& name = miter->name;
            const rapidjson::Value& value = miter->value;
            printf("song=%s message=%s\n", name.GetString(), value.GetString());
        }
    }
    float ratio;
    utils::get_rapidjson_number(doc, "/ratio", ratio);
    printf("ratio=%f\n", ratio);
    ///< 生成一个新的json
    rapidjson::Document out(rapidjson::kObjectType);
    rapidjson::Document::AllocatorType &a = out.GetAllocator();
    out.CopyFrom(doc, a);
    rapidjson::Value* pNewMovies = rapidjson::GetValueByPointer(out, "/movies");
    rapidjson::Value movie(rapidjson::kObjectType);
    utils::add_member_string(movie, "name", "Memento", a);
    utils::add_member_int(movie, "like", 12366, a);
    utils::add_member_float(movie, "score", 0.95, a);
    pNewMovies->PushBack(movie.Move(), a);
    ///< SetValueByPointer可以新增节点
    rapidjson::SetValueByPointer(out, "/version", 2.0, a);
    string s = utils::to_styled_string(out);
    printf("after modify json=%s\n", s.c_str());
    return 0;
}

参考：
rapidjson官网：http://rapidjson.org/zh-cn/
git仓库：https://github.com/Tencent/rapidjson.git
一些json解析器的性能对比：https://github.com/miloyip/nativejson-benchmark
jsoncpp和rapidjson哪个好用？：https://www.zhihu.com/question/23654513

内容总结

以上是互联网集市为您收集整理的在c++项目中使用高性能的rapidjson作为json处理库全部内容，希望文章能够帮你解决在c++项目中使用高性能的rapidjson作为json处理库所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/591235.html

来源：【匿名】

【上一篇】php json syntax_error语法错误【下一篇】浅析php中json_encode()和json_decode()

更多 ►

【在c++项目中使用高性能的rapidjson作为json处理库】教程文章相关的互联网学习教程文章

golang json 性能分析【代码】

Json 作为一种重要的数据格式，具有良好的可读性以及自描述性，广泛地应用在各种数据传输场景中。Go 语言里面原生支持了这种数据格式的序列化以及反序列化，内部使用反射机制实现，性能有点差，在高度依赖 json 解析的应用里，往往会成为性能瓶颈，好在已有很多第三方库帮我们解决了这个问题，但是这么多库，对于像我这种有选择困难症的人来说，到底要怎么选择呢，下面就给大家来一一分析一下ffjsongo get -u github.com/pquerna/f...

Java 几种常用 JSON 库性能比较【代码】

title: Java 几种常用 JSON 库性能比较 date: 2020-05-1 categories: ["工具"] summary: "目前对于Java开源的JSON类库有很多种，我们取4个常用的JSON库进行性能测试对比，同时根据测试结果分析如果根据实际应用场景选择最合适的JSON库。" author: White Song tags: [java, json] cover: https://img.yilon.top/blog/vyjhl.jpg blog: https://blog.yilon.top每次都在网上看到别人说什么某某库性能是如何如何的好，碾压其他的库。但...

php中serialize序列化与json性能测试的示例分析

最近需要对大数组做存储，需要在serialize序列化和json之间做了选择。因此需要做了性能测试。在php5.2之前对数组存储的时候，大都使用serialize系列化。php5.2之后，开始内置了 JSON 的支持。在网上看到有些资料说：json_encode和json_decode比内置的serialize和unserialize函数要高效。耳闻不如眼见，眼见不一定为实。那就用实际数据测试吧.....我们先理解概念：一、序列化序列化是将对象状态转换为可保持或可传输的格式的过程。...

javascript – JSON Parse / Stringify的性能

我想在sessionStorage中存储最多大约1万个整数.我将需要JSON解析和stringify来更新这个整数数组. 这是一个糟糕的主意吗？或者表现不是太差了？解决方法:您不应该为此目的使用SessionStorage,因为它阻止了可能导致挂起您的应用程序的主线程. 请检查IndexedDb 它设计为异步且速度更快.它也有很好的支持： https://caniuse.com/#search=indexeddb 希望这可以帮助

浅析PHP中json_encode、json_decode与serialize、unserialize的性能测试【代码】【图】

今天偶然在想，如果用PHP写一个类似BDB的基于文件的Key-Value小型数据库用于存储非结构化的记录型数据，不知道效率会如何？于是便联想到PHP中的对象怎么样序列化存储性价比最高呢？接着想到了之前同事推荐的JSON编码和解码函数。据他所说，json_encode和json_decode比内置的serialize和unserialize函数要高效。于是我决定动手实验，证实一下同事所说的情况是否属实。实验分别在PHP 5.2.13和PHP 5.3.2环境下进行。用同一个变量，...

对phpimplode/explode,serialize,json,msgpack之间性能的讲解

php implode/explode, serialize, json, msgpack 性能对比首先使用implode, serialize, json_encode, msgpack_pack创建四个文本文件，用于测试。创建代码如下：<?php $arr = array(content1 => 一二三四五六七八九十,content2 => 一二三四五六七八九十,content3 => 一二三四五六七八九十 ); echo file_put_contents(implode.txt, implode(,,$arr), true).<br>; echo file_put_contents(serialize.txt, serialize($arr), true).<br>...

PHP中json_encode、json_decode与serialize、unserialize的性能测试分析_PHP教程

于是便联想到PHP中的对象怎么样序列化存储性价比最高呢？接着想到了之前同事推荐的JSON编码和解码函数。据他所说，json_encode和json_decode比内置的serialize和unserialize函数要高效。于是我决定动手实验，证实一下同事所说的情况是否属实。实验分别在PHP 5.2.13和PHP 5.3.2环境下进行。用同一个变量，分别用以上方式进行编码或解码10000次，并得出每个函数执行10000次所需的时间。以下是PHP 5.2.13环境其中一次测试结果： ...

php中serialize序列化与json性能测试的示例分析_PHP教程

最近需要对大数组做存储，需要在serialize序列化和json之间做了选择。因此需要做了性能测试。在php5.2之前对数组存储的时候，大都使用serialize系列化。php5.2之后，开始内置了 JSON 的支持。在网上看到有些资料说：json_encode和json_decode比内置的serialize和unserialize函数要高效。耳闻不如眼见，眼见不一定为实。那就用实际数据测试吧..... 我们先理解概念：一、序列化序列化是将对象状态转换为可保持或可传输的格式的过程...

PHPJSON互转函数性能介绍_PHP教程

json_encode数据到JSON json_decode JSON到PHP变量的转换这两个PHP JSON互转函数在使用Ajax诸如：jquery和Ext框架的时候显得尤为重要，Ext默认接受的数据就是JSON格式，而jquery如果让JSON接入之后就显得更加轻松和简洁。本文将用一个实例讨论一下PHP 的JSON数据函数在jquery中的应用。Jquery做为一个轻量级的Ajax框架确实显得短小而精悍，比较适合Web编程的前台页面，更加适合和PHP结合。其中jquery中有一个方法是：$.getJSON，这...

项目 - 相关标签

项目代码项目管理工具项目开发项目开发流程项目类型

JSON - 最热教程

demjsonpython如何安装？简介dem指标的...基于JSON格式数据的简单jQuery幻灯片插...如何处理JSON中的特殊字符 node将geojson转shp返回给前端的实现方...nodejs更新package.json中的dependenci...怎样使用js实现前后台传输Json JavaScript使用两种方法实现url解析为j...php获取通过url的json数据，返回的是空...php判断json格式是否正确的方法 python 正则表达式与JSON-JSON

首页 / JSON / 在c++项目中使用高性能的rapidjson作为json处理库

在c++项目中使用高性能的rapidjson作为json处理库

内容导读

内容图文

内容总结

内容备注

内容手机端

【在c++项目中使用高性能的rapidjson作为json处理库】教程文章相关的互联网学习教程文章

golang json 性能分析【代码】

Java 几种常用 JSON 库性能比较【代码】

php中serialize序列化与json性能测试的示例分析

javascript – JSON Parse / Stringify的性能

浅析PHP中json_encode、json_decode与serialize、unserialize的性能测试【代码】【图】

对phpimplode/explode,serialize,json,msgpack之间性能的讲解

PHP中json_encode、json_decode与serialize、unserialize的性能测试分析_PHP教程

php中serialize序列化与json性能测试的示例分析_PHP教程

PHPJSON互转函数性能介绍_PHP教程

php读取json文件性能问题

PHP中json_encode、json_decode与serialize、unserialize的性能_PHP

php中serialize序列化与json性能测试的示例分析_PHP

PHP中json_encode、json_decode与serialize、unserialize的性能测试分析_php技巧

php中serialize序列化与json性能测试的示例分析_php实例

PHP中json_encode、json_decode与serialize、unserialize的性能测试分析

JSON - 相关标签

项目 - 相关标签

JSON - 最新教程

JSON - 最热教程