mirror of
https://github.com/USCiLab/cereal.git
synced 2025-10-18 01:45:52 +02:00
fixes a memory issue with rapidxml, we need to make sure that input streams are null terminated (C++ api yeah right!)
This commit is contained in:
@@ -238,6 +238,7 @@ namespace cereal
|
|||||||
{
|
{
|
||||||
try
|
try
|
||||||
{
|
{
|
||||||
|
itsData.push_back('\0'); // rapidxml will do terrible things without this
|
||||||
itsXML.parse<rapidxml::parse_no_data_nodes | rapidxml::parse_declaration_node>( reinterpret_cast<char *>( itsData.data() ) );
|
itsXML.parse<rapidxml::parse_no_data_nodes | rapidxml::parse_declaration_node>( reinterpret_cast<char *>( itsData.data() ) );
|
||||||
}
|
}
|
||||||
catch( rapidxml::parse_error const & e )
|
catch( rapidxml::parse_error const & e )
|
||||||
@@ -273,22 +274,25 @@ namespace cereal
|
|||||||
itsNodes.top().advance();
|
itsNodes.top().advance();
|
||||||
}
|
}
|
||||||
|
|
||||||
// int
|
//! Loads a bool
|
||||||
// long
|
template <class T> inline
|
||||||
// long long
|
typename std::enable_if<std::is_unsigned<T>::value && std::is_same<T, bool>::value, void>::type
|
||||||
// ulong
|
loadValue( T & value )
|
||||||
// ulong long
|
{
|
||||||
//
|
std::istringstream is( itsNodes.top().node->value() );
|
||||||
|
is.setf( std::ios::boolalpha );
|
||||||
|
is >> value;
|
||||||
|
}
|
||||||
|
|
||||||
template <class T> inline
|
template <class T> inline
|
||||||
typename std::enable_if<std::is_unsigned<T>::value && sizeof(T) < sizeof(long long), void>::type
|
typename std::enable_if<std::is_unsigned<T>::value && !std::is_same<T, bool>::value && sizeof(T) < sizeof(long long), void>::type
|
||||||
loadValue( T & value )
|
loadValue( T & value )
|
||||||
{
|
{
|
||||||
value = std::stoul( itsNodes.top().node->value() );
|
value = std::stoul( itsNodes.top().node->value() );
|
||||||
}
|
}
|
||||||
|
|
||||||
template <class T> inline
|
template <class T> inline
|
||||||
typename std::enable_if<std::is_unsigned<T>::value && sizeof(T) >= sizeof(long long), void>::type
|
typename std::enable_if<std::is_unsigned<T>::value && !std::is_same<T, bool>::value && sizeof(T) >= sizeof(long long), void>::type
|
||||||
loadValue( T & value )
|
loadValue( T & value )
|
||||||
{
|
{
|
||||||
value = std::stoull( itsNodes.top().node->value() );
|
value = std::stoull( itsNodes.top().node->value() );
|
||||||
@@ -401,7 +405,7 @@ namespace cereal
|
|||||||
}; // NodeInfo
|
}; // NodeInfo
|
||||||
|
|
||||||
private:
|
private:
|
||||||
std::vector<uint8_t> itsData; //!< The raw data loaded
|
std::vector<char> itsData; //!< The raw data loaded
|
||||||
rapidxml::xml_document<> itsXML; //!< The XML document
|
rapidxml::xml_document<> itsXML; //!< The XML document
|
||||||
std::stack<NodeInfo> itsNodes; //!< A stack of nodes read from the document
|
std::stack<NodeInfo> itsNodes; //!< A stack of nodes read from the document
|
||||||
};
|
};
|
||||||
|
|||||||
308
sandbox.cpp
308
sandbox.cpp
@@ -279,12 +279,6 @@ int main()
|
|||||||
{
|
{
|
||||||
std::cout << std::boolalpha << std::endl;
|
std::cout << std::boolalpha << std::endl;
|
||||||
|
|
||||||
std::stringstream os;
|
|
||||||
cereal::BinaryOutputArchive archive(os);
|
|
||||||
|
|
||||||
Derived d;
|
|
||||||
archive( d );
|
|
||||||
|
|
||||||
Everything e_out;
|
Everything e_out;
|
||||||
e_out.x = 99;
|
e_out.x = 99;
|
||||||
e_out.y = 100;
|
e_out.y = 100;
|
||||||
@@ -294,175 +288,177 @@ int main()
|
|||||||
e_out.t4 = {4};
|
e_out.t4 = {4};
|
||||||
e_out.s = "Hello, World!";
|
e_out.s = "Hello, World!";
|
||||||
|
|
||||||
Test2 t2 = {22};
|
//Test2 t2 = {22};
|
||||||
|
|
||||||
|
//{
|
||||||
|
// std::ofstream os("out.txt");
|
||||||
|
// cereal::BinaryOutputArchive archive(os);
|
||||||
|
// archive(CEREAL_NVP(e_out));
|
||||||
|
// archive(t2);
|
||||||
|
//}
|
||||||
|
|
||||||
|
//Everything e_in;
|
||||||
|
|
||||||
|
//{
|
||||||
|
// std::ifstream is("out.txt");
|
||||||
|
// cereal::BinaryInputArchive archive(is);
|
||||||
|
// archive(CEREAL_NVP(e_in));
|
||||||
|
// archive(t2);
|
||||||
|
// std::remove("out.txt");
|
||||||
|
//}
|
||||||
|
|
||||||
|
//assert(e_in == e_out);
|
||||||
|
|
||||||
|
//{
|
||||||
|
// cereal::BinaryOutputArchive archive(std::cout);
|
||||||
|
// int xxx[] = {-1, 95, 3};
|
||||||
|
// archive( xxx );
|
||||||
|
|
||||||
|
// cereal::XMLOutputArchive archive2(std::cout);
|
||||||
|
// archive2( xxx );
|
||||||
|
//}
|
||||||
|
|
||||||
|
for( int i = 0; i < 10; ++i )
|
||||||
{
|
{
|
||||||
std::ofstream os("out.txt");
|
|
||||||
cereal::BinaryOutputArchive archive(os);
|
|
||||||
archive(CEREAL_NVP(e_out));
|
|
||||||
archive(t2);
|
|
||||||
}
|
|
||||||
|
|
||||||
Everything e_in;
|
|
||||||
|
|
||||||
{
|
|
||||||
std::ifstream is("out.txt");
|
|
||||||
cereal::BinaryInputArchive archive(is);
|
|
||||||
archive(CEREAL_NVP(e_in));
|
|
||||||
archive(t2);
|
|
||||||
std::remove("out.txt");
|
|
||||||
}
|
|
||||||
|
|
||||||
assert(e_in == e_out);
|
|
||||||
|
|
||||||
{
|
|
||||||
cereal::BinaryOutputArchive archive(std::cout);
|
|
||||||
int xxx[] = {-1, 95, 3};
|
|
||||||
archive( xxx );
|
|
||||||
|
|
||||||
cereal::XMLOutputArchive archive2(std::cout);
|
|
||||||
archive2( xxx );
|
|
||||||
}
|
|
||||||
|
|
||||||
{
|
|
||||||
std::ofstream os("out.xml");
|
|
||||||
cereal::XMLOutputArchive oar( os );
|
|
||||||
//cereal::XMLOutputArchive oar( std::cout );
|
|
||||||
|
|
||||||
oar( cereal::make_nvp("hello", 5 ) );
|
|
||||||
|
|
||||||
std::string bla("bla");
|
|
||||||
oar( bla );
|
|
||||||
|
|
||||||
auto intptr = std::make_shared<int>(99);
|
|
||||||
oar( CEREAL_NVP(intptr) );
|
|
||||||
|
|
||||||
std::map<std::string, int> map1 =
|
|
||||||
{
|
{
|
||||||
{"one", 1},
|
std::ofstream os("out.xml");
|
||||||
{"two", 2},
|
cereal::XMLOutputArchive oar( os );
|
||||||
{"three", 3}
|
//cereal::XMLOutputArchive oar( std::cout );
|
||||||
};
|
|
||||||
|
|
||||||
oar( CEREAL_NVP(map1) );
|
oar( cereal::make_nvp("hello", 5 ) );
|
||||||
|
|
||||||
int x = 3;
|
std::string bla("bla");
|
||||||
oar( CEREAL_NVP(x) );
|
oar( bla );
|
||||||
oar( 5 );
|
|
||||||
oar( 3.3 );
|
|
||||||
oar( 3.2f );
|
|
||||||
oar( true );
|
|
||||||
|
|
||||||
std::array<int,5> arr = {{1, 2, 3, 4, 5}};
|
auto intptr = std::make_shared<int>(99);
|
||||||
oar( arr );
|
oar( CEREAL_NVP(intptr) );
|
||||||
|
|
||||||
std::vector<std::string> vec = {"hey",
|
std::map<std::string, int> map1 =
|
||||||
"there",
|
{
|
||||||
"buddy"};
|
{"one", 1},
|
||||||
|
{"two", 2},
|
||||||
|
{"three", 3}
|
||||||
|
};
|
||||||
|
|
||||||
std::vector<std::vector<std::string>> vec2 = {vec, vec, vec};
|
oar( CEREAL_NVP(map1) );
|
||||||
|
|
||||||
oar( cereal::make_nvp("EVERYTHING", e_out) );
|
int x = 3;
|
||||||
oar( vec );
|
oar( CEREAL_NVP(x) );
|
||||||
oar( vec2 );
|
oar( 5 );
|
||||||
|
oar( 3.3 );
|
||||||
|
oar( 3.2f );
|
||||||
|
oar( true );
|
||||||
|
|
||||||
int xxx[] = {-1, 95, 3};
|
std::array<int,5> arr = {{1, 2, 3, 4, 5}};
|
||||||
oar.saveBinaryValue( xxx, sizeof(int)*3, "xxxbinary" );
|
oar( arr );
|
||||||
//oar.saveBinaryValue( xxx, sizeof(int)*3 );
|
|
||||||
|
|
||||||
std::unique_ptr<Derived> d1( new Derived(3, 4) );
|
std::vector<std::string> vec = {"hey",
|
||||||
std::unique_ptr<Base> d2( new Derived(4, 5) );
|
"there",
|
||||||
std::shared_ptr<Base> d3( new Derived(5, 6) );
|
"buddy"};
|
||||||
oar( d1 );
|
|
||||||
oar( d2 );
|
|
||||||
oar( d3 );
|
|
||||||
}
|
|
||||||
|
|
||||||
if(false)
|
std::vector<std::vector<std::string>> vec2 = {vec, vec, vec};
|
||||||
{
|
|
||||||
std::ifstream is("out.xml");
|
|
||||||
cereal::XMLInputArchive iar( is );
|
|
||||||
|
|
||||||
int hello;
|
oar( cereal::make_nvp("EVERYTHING", e_out) );
|
||||||
iar( cereal::make_nvp("hello", hello) );
|
oar( vec );
|
||||||
assert( hello == 5 );
|
oar( vec2 );
|
||||||
|
|
||||||
std::string bla;
|
int xxx[] = {-1, 95, 3};
|
||||||
iar( bla );
|
oar.saveBinaryValue( xxx, sizeof(int)*3, "xxxbinary" );
|
||||||
assert( bla == "bla" );
|
//oar.saveBinaryValue( xxx, sizeof(int)*3 );
|
||||||
|
|
||||||
std::shared_ptr<int> intptr;
|
std::unique_ptr<Derived> d1( new Derived(3, 4) );
|
||||||
iar( CEREAL_NVP(intptr) );
|
std::unique_ptr<Base> d2( new Derived(4, 5) );
|
||||||
assert( *intptr == 99 );
|
std::shared_ptr<Base> d3( new Derived(5, 6) );
|
||||||
|
oar( d1 );
|
||||||
std::map<std::string, int> map1;
|
oar( d2 );
|
||||||
|
oar( d3 );
|
||||||
iar( CEREAL_NVP(map1) );
|
|
||||||
assert( map1["one"] == 1 );
|
|
||||||
assert( map1["two"] == 2 );
|
|
||||||
assert( map1["three"] == 3 );
|
|
||||||
|
|
||||||
|
|
||||||
int x;
|
|
||||||
iar( CEREAL_NVP(x) );
|
|
||||||
assert( x == 3 );
|
|
||||||
|
|
||||||
int x5;
|
|
||||||
iar( x5 );
|
|
||||||
assert( x5 == 5 );
|
|
||||||
|
|
||||||
double x33;
|
|
||||||
iar( x33 );
|
|
||||||
assert( x33 == 3.3 );
|
|
||||||
|
|
||||||
float x32;
|
|
||||||
iar( x32 );
|
|
||||||
assert( x32 == 3.2f );
|
|
||||||
|
|
||||||
bool xtrue;
|
|
||||||
iar( xtrue );
|
|
||||||
assert( xtrue == true );
|
|
||||||
|
|
||||||
std::array<int,5> arr;
|
|
||||||
iar( arr );
|
|
||||||
for( size_t i = 0; i < 5; ++i )
|
|
||||||
assert( arr[i] == (i+1) );
|
|
||||||
|
|
||||||
Everything e;
|
|
||||||
iar( cereal::make_nvp("EVERYTHING", e) );
|
|
||||||
assert( e == e_out );
|
|
||||||
|
|
||||||
std::vector<std::string> vec;
|
|
||||||
iar( vec );
|
|
||||||
assert( vec[0] == "hey" );
|
|
||||||
assert( vec[1] == "there" );
|
|
||||||
assert( vec[2] == "buddy" );
|
|
||||||
|
|
||||||
std::vector<std::vector<std::string>> vec2;
|
|
||||||
iar( vec2 );
|
|
||||||
for( auto & v : vec2 )
|
|
||||||
{
|
|
||||||
assert( v[0] == "hey" );
|
|
||||||
assert( v[1] == "there" );
|
|
||||||
assert( v[2] == "buddy" );
|
|
||||||
}
|
}
|
||||||
|
|
||||||
int xxx[3];
|
{
|
||||||
iar.loadBinaryValue( xxx, sizeof(int)*3 );
|
std::ifstream is("out.xml");
|
||||||
assert( xxx[0] == -1 );
|
cereal::XMLInputArchive iar( is );
|
||||||
assert( xxx[1] == 95 );
|
|
||||||
assert( xxx[2] == 3 );
|
|
||||||
|
|
||||||
std::unique_ptr<Derived> d1;
|
int hello;
|
||||||
std::unique_ptr<Base> d2;
|
iar( cereal::make_nvp("hello", hello) );
|
||||||
std::shared_ptr<Base> d3;
|
assert( hello == 5 );
|
||||||
|
|
||||||
iar( d1 );
|
std::string bla;
|
||||||
assert( d1->x == 4 && d1->y == 3 );
|
iar( bla );
|
||||||
iar( d2 );
|
assert( bla == "bla" );
|
||||||
assert( ((Derived*)d2.get())->x == 5 && ((Derived*)d2.get())->y == 4 );
|
|
||||||
iar( d3 );
|
std::shared_ptr<int> intptr;
|
||||||
assert( ((Derived*)d3.get())->x == 6 && ((Derived*)d3.get())->y == 5 );
|
iar( CEREAL_NVP(intptr) );
|
||||||
|
assert( *intptr == 99 );
|
||||||
|
|
||||||
|
std::map<std::string, int> map1;
|
||||||
|
|
||||||
|
iar( CEREAL_NVP(map1) );
|
||||||
|
assert( map1["one"] == 1 );
|
||||||
|
assert( map1["two"] == 2 );
|
||||||
|
assert( map1["three"] == 3 );
|
||||||
|
|
||||||
|
|
||||||
|
int x;
|
||||||
|
iar( CEREAL_NVP(x) );
|
||||||
|
assert( x == 3 );
|
||||||
|
|
||||||
|
int x5;
|
||||||
|
iar( x5 );
|
||||||
|
assert( x5 == 5 );
|
||||||
|
|
||||||
|
double x33;
|
||||||
|
iar( x33 );
|
||||||
|
assert( x33 == 3.3 );
|
||||||
|
|
||||||
|
float x32;
|
||||||
|
iar( x32 );
|
||||||
|
assert( x32 == 3.2f );
|
||||||
|
|
||||||
|
bool xtrue;
|
||||||
|
iar( xtrue );
|
||||||
|
assert( xtrue == true );
|
||||||
|
|
||||||
|
std::array<int,5> arr;
|
||||||
|
iar( arr );
|
||||||
|
for( size_t i = 0; i < 5; ++i )
|
||||||
|
assert( arr[i] == (i+1) );
|
||||||
|
|
||||||
|
Everything e;
|
||||||
|
iar( cereal::make_nvp("EVERYTHING", e) );
|
||||||
|
assert( e == e_out );
|
||||||
|
|
||||||
|
std::vector<std::string> vec;
|
||||||
|
iar( vec );
|
||||||
|
assert( vec[0] == "hey" );
|
||||||
|
assert( vec[1] == "there" );
|
||||||
|
assert( vec[2] == "buddy" );
|
||||||
|
|
||||||
|
std::vector<std::vector<std::string>> vec2;
|
||||||
|
iar( vec2 );
|
||||||
|
for( auto & v : vec2 )
|
||||||
|
{
|
||||||
|
assert( v[0] == "hey" );
|
||||||
|
assert( v[1] == "there" );
|
||||||
|
assert( v[2] == "buddy" );
|
||||||
|
}
|
||||||
|
|
||||||
|
int xxx[3];
|
||||||
|
iar.loadBinaryValue( xxx, sizeof(int)*3 );
|
||||||
|
assert( xxx[0] == -1 );
|
||||||
|
assert( xxx[1] == 95 );
|
||||||
|
assert( xxx[2] == 3 );
|
||||||
|
|
||||||
|
std::unique_ptr<Derived> d1;
|
||||||
|
std::unique_ptr<Base> d2;
|
||||||
|
std::shared_ptr<Base> d3;
|
||||||
|
|
||||||
|
iar( d1 );
|
||||||
|
assert( d1->x == 4 && d1->y == 3 );
|
||||||
|
iar( d2 );
|
||||||
|
assert( ((Derived*)d2.get())->x == 5 && ((Derived*)d2.get())->y == 4 );
|
||||||
|
iar( d3 );
|
||||||
|
assert( ((Derived*)d3.get())->x == 6 && ((Derived*)d3.get())->y == 5 );
|
||||||
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|
||||||
|
|||||||
@@ -214,6 +214,8 @@ void test_pod()
|
|||||||
float const o_float = random_value<float>(gen);
|
float const o_float = random_value<float>(gen);
|
||||||
double const o_double = random_value<double>(gen);
|
double const o_double = random_value<double>(gen);
|
||||||
|
|
||||||
|
std::cerr << i << std::endl;
|
||||||
|
|
||||||
std::ostringstream os;
|
std::ostringstream os;
|
||||||
{
|
{
|
||||||
OArchive oar(os);
|
OArchive oar(os);
|
||||||
|
|||||||
Reference in New Issue
Block a user