backported to p9 as 2.9.0-alt0.M90P.1 (with rpmbph script)

conf/libuniset2.spec

@@ -25,7 +25,7 @@
 %define oname uniset2
 
 Name: libuniset2
-Version: 2.8.1
+Version: 2.9.0
 Release: alt0.M90P.1
 Summary: UniSet - library for building distributed industrial control systems
 
@@ -546,9 +546,12 @@ rm -f %buildroot%_docdir/%oname/html/*.md5
 # history of current unpublished changes
 
 %changelog
-* Sun Dec 06 2020 Pavel Vainerman <pv@altlinux.ru> 2.8.1-alt0.M90P.1
+* Sun Dec 13 2020 Pavel Vainerman <pv@altlinux.ru> 2.9.0-alt0.M90P.1
 - backport to ALTLinux p9 (by rpmbph script)
 
+* Sun Dec 13 2020 Pavel Vainerman <pv@altlinux.ru> 2.9.0-alt1
+- (unet): message processing (zeop-copy optimization)
+
 * Sat Dec 05 2020 Pavel Vainerman <pv@altlinux.ru> 2.8.1-alt1
 - (unet): unet recevier refactoring (optimization)
 

extensions/UNetUDP/UDPPacket.cc

@@ -35,7 +35,11 @@ static bool HostIsBigEndian = false;
 
 #if __BYTE_ORDER == __BIG_ENDIAN
 static bool HostIsBigEndian = true;
+<<<<<<< HEAD
 #define BE_TO_H(x) {}
+=======
+header.#define BE_TO_H(x) {}
+>>>>>>> 2.9.0-alt1
 #elif INTPTR_MAX == INT64_MAX
 #define BE_TO_H(x) x = be64toh(x)
 #elif INTPTR_MAX == INT32_MAX
@@ -141,7 +145,6 @@ namespace uniset
 		return os << (*p);
 	}
 	// -----------------------------------------------------------------------------
-
 	std::ostream& UniSetUDP::operator<<( std::ostream& os, UniSetUDP::UDPAData& p )
 	{
 		return os << "id=" << p.id << " val=" << p.val;
@@ -153,29 +156,25 @@ namespace uniset
 
 		os << "DIGITAL:" << endl;
 
-		for( size_t i = 0; i < p.dcount; i++ )
+		for( size_t i = 0; i < p.header.dcount; i++ )
 			os << "[" << i << "]={" << p.dID(i) << "," << p.dValue(i) << "}" << endl;
 
 		os << "ANALOG:" << endl;
 
-		for( size_t i = 0; i < p.acount; i++ )
+		for( size_t i = 0; i < p.header.acount; i++ )
 			os << "[" << i << "]={" << p.a_dat[i].id << "," << p.a_dat[i].val << "}" << endl;
 
 		return os;
 	}
 	// -----------------------------------------------------------------------------
-	UDPMessage::UDPMessage() noexcept
-	{
-	}
-	// -----------------------------------------------------------------------------
 	size_t UDPMessage::addAData( const UniSetUDP::UDPAData& dat ) noexcept
 	{
-		if( acount >= MaxACount )
+		if( header.acount >= MaxACount )
 			return MaxACount;
 
-		a_dat[acount] = dat;
-		acount++;
-		return acount - 1;
+		a_dat[header.acount] = dat;
+		header.acount++;
+		return header.acount - 1;
 	}
 	// -----------------------------------------------------------------------------
 	size_t UDPMessage::addAData( long id, long val) noexcept
@@ -197,18 +196,18 @@ namespace uniset
 	// -----------------------------------------------------------------------------
 	size_t UDPMessage::addDData( long id, bool val ) noexcept
 	{
-		if( dcount >= MaxDCount )
+		if( header.dcount >= MaxDCount )
 			return MaxDCount;
 
 		// сохраняем ID
-		d_id[dcount] = id;
+		d_id[header.dcount] = id;
 
-		bool res = setDData( dcount, val );
+		bool res = setDData( header.dcount, val );
 
 		if( res )
 		{
-			dcount++;
-			return dcount - 1;
+			header.dcount++;
+			return header.dcount - 1;
 		}
 
 		return MaxDCount;
@@ -219,8 +218,8 @@ namespace uniset
 		if( index >= MaxDCount )
 			return false;
 
-		size_t nbyte = index / 8 * sizeof(unsigned char);
-		size_t nbit =  index % 8 * sizeof(unsigned char);
+		size_t nbyte = index / 8 * sizeof(uint8_t);
+		size_t nbit =  index % 8 * sizeof(uint8_t);
 
 		// выставляем бит
 		unsigned char d = d_dat[nbyte];
@@ -247,12 +246,13 @@ namespace uniset
 		if( index >= MaxDCount )
 			return uniset::DefaultObjectId;
 
-		size_t nbyte = index / 8 * sizeof(unsigned char);
-		size_t nbit =  index % 8 * sizeof(unsigned char);
+		size_t nbyte = index / 8 * sizeof(uint8_t);
+		size_t nbit =  index % 8 * sizeof(uint8_t);
 
 		return ( d_dat[nbyte] & (1 << nbit) );
 	}
 	// -----------------------------------------------------------------------------
+<<<<<<< HEAD
 	size_t UDPMessage::transport_msg( UDPPacket& p ) const noexcept
 	{
 		p = UDPPacket{}; // reset data
@@ -282,37 +282,31 @@ namespace uniset
 		return i;
 	}
 	// -----------------------------------------------------------------------------
+=======
+>>>>>>> 2.9.0-alt1
 	long UDPMessage::getDataID() const noexcept
 	{
 		// в качестве идентификатора берётся ID первого датчика в данных
 		// приоритет имеет аналоговые датчики
 
-		if( acount > 0 )
+		if( header.acount > 0 )
 			return a_dat[0].id;
 
-		if( dcount > 0 )
+		if( header.dcount > 0 )
 			return d_id[0];
 
 		// если нет данных(?) просто возвращаем номер пакета
-		return num;
+		return header.num;
 	}
 	// -----------------------------------------------------------------------------
-	size_t UniSetUDP::UDPMessage::sizeOf() const noexcept
+	bool UDPMessage::isOk() noexcept
 	{
-		// биты которые не уместились в очередной байт, добавляют ещё один байт
-		size_t nbit =  dcount % 8 * sizeof(unsigned char);
-		size_t add = nbit > 0 ? 1 : 0;
-
-		return sizeof(UDPHeader) + acount * sizeof(UDPAData) + dcount * sizeof(long) + (dcount / 8 * sizeof(unsigned char) + add);
+		return ( header.magic == UniSetUDP::UNETUDP_MAGICNUM );
 	}
 	// -----------------------------------------------------------------------------
-	UDPMessage::UDPMessage( UDPPacket& p ) noexcept
-	{
-		getMessage(*this, p);
-	}
-	// -----------------------------------------------------------------------------
-	size_t UDPMessage::getMessage( UDPMessage& m, UDPPacket& p ) noexcept
+	void UDPMessage::ntoh() noexcept
 	{
+<<<<<<< HEAD
 		// reset data
 		m = UDPMessage{};
 
@@ -320,76 +314,44 @@ namespace uniset
 		memcpy(&m, &(p.data[i]), sizeof(UDPHeader));
 		i += sizeof(UDPHeader);
 
+=======
+>>>>>>> 2.9.0-alt1
 		// byte order from packet
-		u_char be_order = m._be_order;
+		uint8_t be_order = header._be_order;
 
 		if( be_order && !HostIsBigEndian )
 		{
-			BE_TO_H(m.magic);
-			BE_TO_H(m.num);
-			BE_TO_H(m.procID);
-			BE_TO_H(m.nodeID);
-			BE_TO_H(m.dcount);
-			BE_TO_H(m.acount);
+			BE_TO_H(header.magic);
+			BE_TO_H(header.num);
+			BE_TO_H(header.procID);
+			BE_TO_H(header.nodeID);
+			BE_TO_H(header.dcount);
+			BE_TO_H(header.acount);
 		}
 		else if( !be_order && HostIsBigEndian )
 		{
-			LE_TO_H(m.magic);
-			LE_TO_H(m.num);
-			LE_TO_H(m.procID);
-			LE_TO_H(m.nodeID);
-			LE_TO_H(m.dcount);
-			LE_TO_H(m.acount);
+			LE_TO_H(header.magic);
+			LE_TO_H(header.num);
+			LE_TO_H(header.procID);
+			LE_TO_H(header.nodeID);
+			LE_TO_H(header.dcount);
+			LE_TO_H(header.acount);
 		}
 
 		// set host byte order
 #if __BYTE_ORDER == __LITTLE_ENDIAN
-		m._be_order = 0;
+		header._be_order = 0;
 #elif __BYTE_ORDER == __BIG_ENDIAN
-		m. be_order = 1;
+		header._be_order = 1;
 #else
 #error UNET(getMessage): Unknown byte order!
 #endif
 
-		// проверяем наш ли пакет..
-		if( m.magic != UniSetUDP::UNETUDP_MAGICNUM )
-		{
-			m.magic = 0;
-			return 0;
-		}
-
-		// копируем аналоговые данные
-		size_t sz = m.acount * sizeof(UDPAData);
-
-		if( sz > sizeof(m.a_dat) )
-			sz = sizeof(m.a_dat);
-
-		memcpy(m.a_dat, &(p.data[i]), sz);
-		i += sz;
-
-		// копируем булевые индексы
-		sz = m.dcount * sizeof(long);
-
-		if( sz > sizeof(m.d_id) )
-			sz = sizeof(m.d_id);
-
-		memcpy(m.d_id, &(p.data[i]), sz);
-		i += sz;
-
-		// копируем булевые данные
-		size_t nbyte = m.dcount / 8 * sizeof(unsigned char);
-		size_t nbit =  m.dcount % 8 * sizeof(unsigned char);
-		sz = nbit > 0 ? nbyte + 1 : nbyte;
-
-		if( sz > sizeof(m.d_dat) )
-			sz = sizeof(m.d_dat);
-
-		memcpy(m.d_dat, &(p.data[i]), sz);
-
 		// CONVERT DATA TO HOST BYTE ORDER
 		// -------------------------------
 		if( (be_order && !HostIsBigEndian) || (!be_order && HostIsBigEndian) )
 		{
+<<<<<<< HEAD
 			for( size_t n = 0; n < m.acount; n++ )
 			{
 				if( be_order )
@@ -413,11 +375,34 @@ namespace uniset
 				else
 				{
 					LE_TO_H(m.d_id[n]);
+=======
+			for( size_t n = 0; n < header.acount; n++ )
+			{
+				if( be_order )
+				{
+					BE_TO_H(a_dat[n].id);
+					BE_TO_H(a_dat[n].val);
+				}
+				else
+				{
+					LE_TO_H(a_dat[n].id);
+					LE_TO_H(a_dat[n].val);
 				}
 			}
-		}
 
-		return i + sz;
+			for( size_t n = 0; n < header.dcount; n++ )
+			{
+				if( be_order )
+				{
+					BE_TO_H(d_id[n]);
+				}
+				else
+				{
+					LE_TO_H(d_id[n]);
+>>>>>>> 2.9.0-alt1
+				}
+			}
+		}
 	}
 	// -----------------------------------------------------------------------------
 	uint16_t UDPMessage::getDataCRC() const noexcept

extensions/UNetUDP/UDPPacket.h

@@ -27,14 +27,10 @@ namespace uniset
 	// -----------------------------------------------------------------------------
 	namespace UniSetUDP
 	{
-		/*! Для оптимизации размера передаваемых данных, но с учётом того, что ID могут идти не подряд.
-		    Сделан следующий формат:
-		    Для аналоговых величин передаётся массив пар "id-value"(UDPAData).
-		    Для булевых величин - отдельно массив ID и отдельно битовый массив со значениями,
-		    (по количеству битов такого же размера).
-
-		    \todo Подумать на тему сделать два отдельных вида пакетов для булевых значений и для аналоговых,
-		          чтобы уйти от преобразования UDPMessage --> UDPPacket --> UDPMessage.
+		/*! С учётом того, что ID могут идти не подряд. Сделан следующий формат:
+			Для аналоговых величин передаётся массив пар "id-value"(UDPAData).
+			Для булевых величин - отдельно массив ID и отдельно битовый массив со значениями,
+			(по количеству битов такого же размера).
 
 			\warning ТЕКУЩАЯ ВЕРСИЯ ПРОТОКОЛА НЕ БУДЕТ РАБОТАТЬ МЕЖДУ 32-битными и 64-битными системами (из-за отличия в типе long).
 			т.к. это не сильно актуально, пока не переделываю.
@@ -49,20 +45,18 @@ namespace uniset
 			Т.е. если все узлы будут иметь одинаковый порядок байт, фактического перекодирования не будет.
 		*/
 
-		const uint32_t UNETUDP_MAGICNUM = 0x133EF54; // идентификатор протокола
+		const uint32_t UNETUDP_MAGICNUM = 0x1343EFD; // идентификатор протокола
 
 		struct UDPHeader
 		{
 			UDPHeader() noexcept;
 			uint32_t magic;
-			u_char _be_order; // 1 - BE byte order, 0 - LE byte order
+			uint8_t _be_order; // 1 - BE byte order, 0 - LE byte order
 			size_t num;
 			long nodeID;
 			long procID;
-
 			size_t dcount; /*!< количество булевых величин */
 			size_t acount; /*!< количество аналоговых величин */
-
 		} __attribute__((packed));
 
 		std::ostream& operator<<( std::ostream& os, UDPHeader& p );
@@ -85,39 +79,16 @@ namespace uniset
 		// Теоретический размер данных в UDP пакете (исключая заголовки) 65507
 		// Фактически желательно не вылезать за размер MTU (обычно 1500) - заголовки = 1432 байта
 		// т.е. надо чтобы sizeof(UDPPacket) < 1432
-		// с другой стороны в текущей реализации
-		// в сеть посылается фактическое количество данных, а не sizeof(UDPPacket).
-
-		// При текущих настройках sizeof(UDPPacket) = 72679 (!)
+		// При текущих настройках sizeof(UDPPacket) = 56421 (!)
 		static const size_t MaxACount = 2000;
-		static const size_t MaxDCount = 5000;
-		static const size_t MaxDDataCount = 1 + MaxDCount / 8 * sizeof(unsigned char);
-
-		struct UDPPacket
-		{
-			UDPPacket() noexcept: len(0) {} // -V730
-
-			size_t len;
-			uint8_t data[ sizeof(UDPHeader) + MaxDCount * sizeof(long) + MaxDDataCount + MaxACount * sizeof(UDPAData) ];
-		} __attribute__((packed));
-
-		static const size_t MaxDataLen = sizeof(UDPPacket);
+		static const size_t MaxDCount = 3000;
+		static const size_t MaxDDataCount = 1 + MaxDCount / 8 * sizeof(uint8_t);
 
-		struct UDPMessage:
-			public UDPHeader
+		struct UDPMessage
 		{
-			UDPMessage() noexcept;
-
-			UDPMessage(UDPMessage&& m) noexcept = default;
-			UDPMessage& operator=(UDPMessage&&) noexcept = default;
-
-			UDPMessage( const UDPMessage& m ) noexcept = default;
-			UDPMessage& operator=(const UDPMessage&) noexcept = default;
-
-			explicit UDPMessage( UDPPacket& p ) noexcept;
-			size_t transport_msg( UDPPacket& p ) const noexcept;
-
-			static size_t getMessage( UDPMessage& m, UDPPacket& p ) noexcept;
+			// net to host
+			void ntoh() noexcept;
+			bool isOk() noexcept;
 
 			// \warning в случае переполнения возвращается MaxDCount
 			size_t addDData( long id, bool val ) noexcept;
@@ -143,43 +114,35 @@ namespace uniset
 
 			inline bool isAFull() const noexcept
 			{
-				return (acount >= MaxACount);
+				return (header.acount >= MaxACount);
 			}
 			inline bool isDFull() const noexcept
 			{
-				return (dcount >= MaxDCount);
+				return (header.dcount >= MaxDCount);
 			}
 
 			inline bool isFull() const noexcept
 			{
-				return !((dcount < MaxDCount) && (acount < MaxACount));
+				return !((header.dcount < MaxDCount) && (header.acount < MaxACount));
 			}
 
 			inline size_t dsize() const noexcept
 			{
-				return dcount;
+				return header.dcount;
 			}
 
 			inline size_t asize() const noexcept
 			{
-				return acount;
+				return header.acount;
 			}
 
-			// размер итогового пакета в байтах
-			size_t sizeOf() const noexcept;
-
 			uint16_t getDataCRC() const noexcept;
 
-			// количество байт в пакете с булевыми переменными...
-			size_t d_byte() const noexcept
-			{
-				return dcount * sizeof(long) + dcount;
-			}
-
+			UDPHeader header;
 			UDPAData a_dat[MaxACount]; /*!< аналоговые величины */
 			long d_id[MaxDCount];      /*!< список дискретных ID */
 			uint8_t d_dat[MaxDDataCount];  /*!< битовые значения */
-		};
+		} __attribute__((packed));
 
 		std::ostream& operator<<( std::ostream& os, UDPMessage& p );
 

extensions/UNetUDP/UNetExchange.cc

@@ -86,7 +86,11 @@ UNetExchange::UNetExchange(uniset::ObjectId objId, uniset::ObjectId shmId, const
 	int maxDiff = conf->getArgPInt("--" + prefix + "-maxdifferense", it.getProp("maxDifferense"), 100);
 	int checkConnectionPause = conf->getArgPInt("--" + prefix + "-checkconnection-pause", it.getProp("checkConnectionPause"), 10000);
 	int initpause = conf->getArgPInt("--" + prefix + "-initpause", it.getProp("initpause"), 5000);
+<<<<<<< HEAD
 	int recvBufferSize = conf->getArgPInt("--" + prefix + "-recv-buffer-size", it.getProp("recvBufferSize"), 3000);
+=======
+	int recvBufferSize = conf->getArgPInt("--" + prefix + "-recv-buffer-size", it.getProp("recvBufferSize"), 100);
+>>>>>>> 2.9.0-alt1
 
 	std::string updateStrategy = conf->getArg2Param("--" + prefix + "-update-strategy", it.getProp("updateStrategy"), "evloop");
 
@@ -844,7 +848,11 @@ void UNetExchange::help_print( int argc, const char* argv[] ) noexcept
 	cout << "--prefix-checkconnection-pause msec  - Пауза между попытками открыть соединение (если это не удалось до этого). По умолчанию: 10000 (10 сек)" << endl;
 	cout << "--prefix-maxdifferense num       - Маскимальная разница в номерах пакетов для фиксации события 'потеря пакетов' " << endl;
 	cout << "--prefix-nosender [0,1]          - Отключить посылку." << endl;
+<<<<<<< HEAD
 	cout << "--prefix-recv-buffer-size sz     - Размер циклического буфера для приёма сообщений. По умолчанию: 3000" << endl;
+=======
+	cout << "--prefix-recv-buffer-size sz     - Размер циклического буфера для приёма сообщений. По умолчанию: 100" << endl;
+>>>>>>> 2.9.0-alt1
 	cout << "--prefix-sm-ready-timeout msec   - Время ожидание я готовности SM к работе. По умолчанию 120000" << endl;
 	cout << "--prefix-filter-field name       - Название фильтрующего поля при формировании списка датчиков посылаемых данным узлом" << endl;
 	cout << "--prefix-filter-value name       - Значение фильтрующего поля при формировании списка датчиков посылаемых данным узлом" << endl;

extensions/UNetUDP/UNetReceiver.cc

@@ -35,9 +35,9 @@ UNetReceiver::UNetReceiver(const std::string& s_host, int _port
 						   , bool nocheckConnection
 						   , const std::string& prefix ):
 	shm(smi),
-	updatepause(100),
 	port(_port),
 	saddr(s_host, _port),
+<<<<<<< HEAD
 	recvTimeout(5000),
 	prepareTime(2000),
 	lostTimeout(200), /* 2*updatepause */
@@ -49,6 +49,9 @@ UNetReceiver::UNetReceiver(const std::string& s_host, int _port
 	cbuf(cbufSize),
 	maxDifferens(20),
 	lockUpdate(false)
+=======
+	cbuf(cbufSize)
+>>>>>>> 2.9.0-alt1
 {
 	{
 		ostringstream s;
@@ -349,7 +352,11 @@ size_t UNetReceiver::rnext( size_t num )
 	{
 		p = &cbuf[i % cbufSize];
 
+<<<<<<< HEAD
 		if( p->num > num )
+=======
+		if( p->header.num > num )
+>>>>>>> 2.9.0-alt1
 			return i;
 
 		i++;
@@ -373,16 +380,25 @@ void UNetReceiver::update() noexcept
 	// либо обнаружится "дырка" в последовательности,
 	while( rnum < wnum )
 	{
+<<<<<<< HEAD
 		p = &cbuf[rnum % cbufSize];
 
 		// если номер пакета не равен ожидаемому, ждём считая что это "дырка"
 		// т.к. разрывы и другие случаи обрабатываются при приёме пакетов
 		if( p->num != rnum )
+=======
+		p = &(cbuf[rnum % cbufSize]);
+
+		// если номер пакета не равен ожидаемому, ждём считая что это "дырка"
+		// т.к. разрывы и другие случаи обрабатываются при приёме пакетов
+		if( p->header.num != rnum )
+>>>>>>> 2.9.0-alt1
 		{
 			if( !ptLostTimeout.checkTime() )
 				return;
 
 			size_t sub = 1;
+<<<<<<< HEAD
 
 			if( p->num > rnum )
 				sub = (p->num - rnum);
@@ -390,6 +406,15 @@ void UNetReceiver::update() noexcept
 			unetwarn << myname << "(update): lostTimeout(" << ptLostTimeout.getInterval() << ")! pnum=" << p->num << " lost " << sub << " packets " << endl;
 			lostPackets += sub;
 
+=======
+
+			if( p->header.num > rnum )
+				sub = (p->header.num - rnum);
+
+			unetwarn << myname << "(update): lostTimeout(" << ptLostTimeout.getInterval() << ")! pnum=" << p->header.num << " lost " << sub << " packets " << endl;
+			lostPackets += sub;
+
+>>>>>>> 2.9.0-alt1
 			// ищем следующий пакет для обработки
 			rnum = rnext(rnum);
 			continue;
@@ -399,10 +424,18 @@ void UNetReceiver::update() noexcept
 		rnum++;
 		upCount++;
 
+		// обновление данных в SM (блокировано)
+		if( lockUpdate )
+			continue;
+
 		// Обработка дискретных
 		auto d_iv = getDCache(p);
 
+<<<<<<< HEAD
 		for( size_t i = 0; i < p->dcount; i++ )
+=======
+		for( size_t i = 0; i < p->header.dcount; i++ )
+>>>>>>> 2.9.0-alt1
 		{
 			try
 			{
@@ -416,15 +449,22 @@ void UNetReceiver::update() noexcept
 					shm->initIterator(c_it->ioit);
 				}
 
+<<<<<<< HEAD
 				// обновление данных в SM (блокировано)
 				if( lockUpdate )
 					continue;
 
+=======
+>>>>>>> 2.9.0-alt1
 				shm->localSetValue(c_it->ioit, s_id, p->dValue(i), shm->ID());
 			}
 			catch( const uniset::Exception& ex)
 			{
+<<<<<<< HEAD
 				unetcrit << myname << "(update): "
+=======
+				unetcrit << myname << "(update): D:"
+>>>>>>> 2.9.0-alt1
 						 << " id=" << s_id
 						 << " val=" << p->dValue(i)
 						 << " error: " << ex
@@ -432,7 +472,11 @@ void UNetReceiver::update() noexcept
 			}
 			catch(...)
 			{
+<<<<<<< HEAD
 				unetcrit << myname << "(update): "
+=======
+				unetcrit << myname << "(update): D:"
+>>>>>>> 2.9.0-alt1
 						 << " id=" << s_id
 						 << " val=" << p->dValue(i)
 						 << " error: catch..."
@@ -443,7 +487,11 @@ void UNetReceiver::update() noexcept
 		// Обработка аналоговых
 		auto a_iv = getACache(p);
 
+<<<<<<< HEAD
 		for( size_t i = 0; i < p->acount; i++ )
+=======
+		for( size_t i = 0; i < p->header.acount; i++ )
+>>>>>>> 2.9.0-alt1
 		{
 			try
 			{
@@ -457,15 +505,15 @@ void UNetReceiver::update() noexcept
 					shm->initIterator(c_it->ioit);
 				}
 
-				// обновление данных в SM (блокировано)
-				if( lockUpdate )
-					continue;
-
 				shm->localSetValue(c_it->ioit, dat->id, dat->val, shm->ID());
 			}
 			catch( const uniset::Exception& ex)
 			{
+<<<<<<< HEAD
 				unetcrit << myname << "(update): "
+=======
+				unetcrit << myname << "(update): A:"
+>>>>>>> 2.9.0-alt1
 						 << " id=" << dat->id
 						 << " val=" << dat->val
 						 << " error: " << ex
@@ -473,7 +521,11 @@ void UNetReceiver::update() noexcept
 			}
 			catch(...)
 			{
+<<<<<<< HEAD
 				unetcrit << myname << "(update): "
+=======
+				unetcrit << myname << "(update): A:"
+>>>>>>> 2.9.0-alt1
 						 << " id=" << dat->id
 						 << " val=" << dat->val
 						 << " error: catch..."
@@ -630,8 +682,14 @@ bool UNetReceiver::receive() noexcept
 {
 	try
 	{
+<<<<<<< HEAD
 		ssize_t ret = udp->receiveBytes(r_buf.data, sizeof(r_buf.data));
 		recvCount++;
+=======
+		// сперва пробуем сохранить пакет в том месте, где должен быть очередной пакет
+		pack = &(cbuf[wnum % cbufSize]);
+		ssize_t ret = udp->receiveBytes(pack, sizeof(UniSetUDP::UDPMessage));
+>>>>>>> 2.9.0-alt1
 
 		if( ret < 0 )
 		{
@@ -641,10 +699,11 @@ bool UNetReceiver::receive() noexcept
 
 		if( ret == 0 )
 		{
-			unetwarn << myname << "(receive): disconnected?!... recv 0 byte.." << endl;
+			unetwarn << myname << "(receive): disconnected?!... recv 0 bytes.." << endl;
 			return false;
 		}
 
+<<<<<<< HEAD
 		// сперва пробуем сохранить пакет в том месте, которе должно быть очередным на запись
 		pack = &cbuf[wnum % cbufSize];
 		size_t sz = UniSetUDP::UDPMessage::getMessage(*pack, r_buf);
@@ -662,6 +721,20 @@ bool UNetReceiver::receive() noexcept
 		{
 			unetcrit << myname << "(receive): DISAGREE "
 					 << " packnum=" << pack->num
+=======
+		recvCount++;
+
+		// конвертируем byte order
+		pack->ntoh();
+
+		if( !pack->isOk() )
+			return false;
+
+		if( size_t(abs(long(pack->header.num - wnum))) > maxDifferens || size_t(abs( long(wnum - rnum) )) >= (cbufSize - 2) )
+		{
+			unetcrit << myname << "(receive): DISAGREE "
+					 << " packnum=" << pack->header.num
+>>>>>>> 2.9.0-alt1
 					 << " wnum=" << wnum
 					 << " rnum=" << rnum
 					 << " (maxDiff=" << maxDifferens
@@ -669,6 +742,7 @@ bool UNetReceiver::receive() noexcept
 					 << ")"
 					 << endl;
 
+<<<<<<< HEAD
 			lostPackets = pack->num > wnum ? (pack->num - wnum - 1) : lostPackets + 1;
 			// реинициализируем позицию для чтения
 			rnum = pack->num;
@@ -679,11 +753,24 @@ bool UNetReceiver::receive() noexcept
 			{
 				cbuf[pack->num % cbufSize] = (*pack);
 				pack->num = 0;
+=======
+			lostPackets = pack->header.num > wnum ? (pack->header.num - wnum - 1) : lostPackets + 1;
+			// реинициализируем позицию для чтения
+			rnum = pack->header.num;
+			wnum = pack->header.num + 1;
+
+			// перемещаем пакет в нужное место (если требуется)
+			if( wnum != pack->header.num )
+			{
+				cbuf[pack->header.num % cbufSize] = (*pack);
+				pack->header.num = 0;
+>>>>>>> 2.9.0-alt1
 			}
 
 			return true;
 		}
 
+<<<<<<< HEAD
 		if( pack->num != wnum )
 		{
 			// перемещаем пакет в правильное место
@@ -703,6 +790,27 @@ bool UNetReceiver::receive() noexcept
 		if( rnum == 0 )
 			rnum = pack->num;
 
+=======
+		if( pack->header.num != wnum )
+		{
+			// перемещаем пакет в правильное место
+			// в соответствии с его номером
+			cbuf[pack->header.num % cbufSize] = (*pack);
+
+			if( pack->header.num >= wnum )
+				wnum = pack->header.num + 1;
+
+			// обнуляем номер в том месте где записали, чтобы его не обрабатывал update
+			pack->header.num = 0;
+		}
+		else if( pack->header.num >= wnum )
+			wnum = pack->header.num + 1;
+
+		// начальная инициализация для чтения
+		if( rnum == 0 )
+			rnum = pack->header.num;
+
+>>>>>>> 2.9.0-alt1
 		return true;
 	}
 	catch( Poco::Net::NetException& ex )
@@ -748,6 +856,7 @@ UNetReceiver::CacheVec* UNetReceiver::getDCache( UniSetUDP::UDPMessage* pack ) n
 
 	CacheVec* d_info = &dit->second;
 
+<<<<<<< HEAD
 	if( pack->dcount == d_info->size() )
 		return d_info;
 
@@ -756,6 +865,16 @@ UNetReceiver::CacheVec* UNetReceiver::getDCache( UniSetUDP::UDPMessage* pack ) n
 	d_info->resize(pack->dcount);
 
 	for( size_t i = 0; i < pack->dcount; i++ )
+=======
+	if( pack->header.dcount == d_info->size() )
+		return d_info;
+
+	unetinfo << myname << ": init dcache[" << pack->header.dcount << "] for " << pack->getDataID() << endl;
+
+	d_info->resize(pack->header.dcount);
+
+	for( size_t i = 0; i < pack->header.dcount; i++ )
+>>>>>>> 2.9.0-alt1
 	{
 		CacheItem& d = (*d_info)[i];
 
@@ -781,6 +900,7 @@ UNetReceiver::CacheVec* UNetReceiver::getACache( UniSetUDP::UDPMessage* pack ) n
 
 	CacheVec* a_info = &ait->second;
 
+<<<<<<< HEAD
 	if( pack->acount == a_info->size() )
 		return a_info;
 
@@ -789,6 +909,16 @@ UNetReceiver::CacheVec* UNetReceiver::getACache( UniSetUDP::UDPMessage* pack ) n
 	a_info->resize(pack->acount);
 
 	for( size_t i = 0; i < pack->acount; i++ )
+=======
+	if( pack->header.acount == a_info->size() )
+		return a_info;
+
+	unetinfo << myname << ": init acache[" << pack->header.acount << "] for " << pack->getDataID() << endl;
+
+	a_info->resize(pack->header.acount);
+
+	for( size_t i = 0; i < pack->header.acount; i++ )
+>>>>>>> 2.9.0-alt1
 	{
 		CacheItem& d = (*a_info)[i];
 

extensions/UNetUDP/UNetReceiver.h

@@ -234,11 +234,12 @@ namespace uniset
 			uniset::ObjectId sidRespond = { uniset::DefaultObjectId };
 			IOController::IOStateList::iterator itRespond;
 			bool respondInvert = { false };
-			uniset::ObjectId sidLostPackets;
+			uniset::ObjectId sidLostPackets = { uniset::DefaultObjectId };
 			IOController::IOStateList::iterator itLostPackets;
 
 			std::atomic_bool activated = { false };
 
+<<<<<<< HEAD
 			size_t cbufSize = { 2000 }; /*!< размер буфера для сообщений по умолчанию */
 			std::vector<UniSetUDP::UDPMessage> cbuf; // circular buffer
 			size_t wnum = { 1 }; /*!< номер следующего ожидаемого пакета */
@@ -246,6 +247,13 @@ namespace uniset
 
 			UniSetUDP::UDPMessage* pack;
 			UniSetUDP::UDPPacket r_buf;  /*!< просто буфер для получения очередного сообщения */
+=======
+			size_t cbufSize = { 100 }; /*!< размер буфера для сообщений по умолчанию */
+			std::vector<UniSetUDP::UDPMessage> cbuf; // circular buffer
+			size_t wnum = { 1 }; /*!< номер следующего ожидаемого пакета */
+			size_t rnum = { 0 }; /*!< номер последнего обработанного пакета */
+			UniSetUDP::UDPMessage* pack; // текущий обрабатываемый пакет
+>>>>>>> 2.9.0-alt1
 
 			/*! максимальная разница между номерами пакетов, при которой считается, что счётчик пакетов
 			 * прошёл через максимум или сбился...

extensions/UNetUDP/UNetSender.cc

@@ -87,8 +87,8 @@ namespace uniset
 		// выставляем поля, которые не меняются
 		{
 			uniset_rwmutex_wrlock l(mypack.mut);
-			mypack.msg.nodeID = uniset_conf()->getLocalNode();
-			mypack.msg.procID = shm->ID();
+			mypack.msg.header.nodeID = uniset_conf()->getLocalNode();
+			mypack.msg.header.procID = shm->ID();
 		}
 
 		// -------------------------------
@@ -317,7 +317,7 @@ namespace uniset
 
 			if( crc != lastcrc )
 			{
-				mypack.msg.num = packetnum++;
+				mypack.msg.header.num = packetnum++;
 				lastcrc = crc;
 			}
 
@@ -331,12 +331,10 @@ namespace uniset
 			if( !udp || !udp->poll( UniSetTimer::millisecToPoco(writeTimeout), Poco::Net::Socket::SELECT_WRITE) )
 				return;
 
-			mypack.msg.transport_msg(s_msg);
+			size_t ret = udp->sendTo(&mypack.msg, sizeof(mypack.msg), saddr);
 
-			size_t ret = udp->sendTo(&s_msg.data, s_msg.len, saddr);
-
-			if( ret < s_msg.len )
-				unetcrit << myname << "(real_send): FAILED ret=" << ret << " < sizeof=" << s_msg.len << endl;
+			if( ret < sizeof(mypack.msg) )
+				unetcrit << myname << "(real_send): FAILED ret=" << ret << " < sizeof=" << sizeof(mypack.msg) << endl;
 		}
 		catch( Poco::Net::NetException& ex )
 		{
@@ -470,8 +468,8 @@ namespace uniset
 				auto& mypack2 = pk[dnum];
 				uniset_rwmutex_wrlock l2(mypack2.mut);
 				p.pack_ind = mypack2.msg.addDData(sid, defval);
-				mypack2.msg.nodeID = uniset_conf()->getLocalNode();
-				mypack2.msg.procID = shm->ID();
+				mypack2.msg.header.nodeID = uniset_conf()->getLocalNode();
+				mypack2.msg.header.procID = shm->ID();
 			}
 
 			p.pack_num = dnum;
@@ -511,8 +509,8 @@ namespace uniset
 				auto& mypack2 = pk[anum];
 				uniset_rwmutex_wrlock l2(mypack2.mut);
 				p.pack_ind = mypack2.msg.addAData(sid, defval);
-				mypack2.msg.nodeID = uniset_conf()->getLocalNode();
-				mypack2.msg.procID = shm->ID();
+				mypack2.msg.header.nodeID = uniset_conf()->getLocalNode();
+				mypack2.msg.header.procID = shm->ID();
 			}
 
 			p.pack_num = anum;
@@ -589,11 +587,11 @@ namespace uniset
 			s << "        \t[" << i->first << "]=" << i->second.size() << endl;
 			size_t n = 0;
 
-			for( const auto& p : i->second )
+			for( const auto& pack : i->second )
 			{
 				//uniset_rwmutex_rlock l(p->mut);
-				s << "        \t\t[" << (n++) << "]=" << p.msg.sizeOf() << " bytes"
-				  << " ( numA=" << setw(5) << p.msg.asize() << " numD=" << setw(5) << p.msg.dsize() << ")"
+				s << "        \t\t[" << (n++) << "]=" << sizeof(pack.msg) << " bytes"
+				  << " ( numA=" << setw(5) << pack.msg.asize() << " numD=" << setw(5) << pack.msg.dsize() << ")"
 				  << endl;
 			}
 		}

extensions/UNetUDP/UNetSender.h

@@ -114,12 +114,12 @@ namespace uniset
 
 			struct PackMessage
 			{
-				PackMessage( UniSetUDP::UDPMessage&& m ) noexcept: msg(std::move(m)) {}
-				PackMessage( const UniSetUDP::UDPMessage& m ) = delete;
+				PackMessage( uniset::UniSetUDP::UDPMessage&& m ) noexcept: msg(std::move(m)) {}
+				PackMessage( const uniset::UniSetUDP::UDPMessage& m ) = delete;
 
 				PackMessage() noexcept {}
 
-				UniSetUDP::UDPMessage msg;
+				uniset::UniSetUDP::UDPMessage msg;
 				uniset::uniset_rwmutex mut;
 			};
 
@@ -223,7 +223,6 @@ namespace uniset
 			UItemMap items;
 			size_t packetnum = { 1 }; /*!< номер очередного посылаемого пакета */
 			uint16_t lastcrc = { 0 };
-			UniSetUDP::UDPPacket s_msg;
 
 			size_t maxAData = { UniSetUDP::MaxACount };
 			size_t maxDData = { UniSetUDP::MaxDCount };

extensions/UNetUDP/tests/urecv_perf_test.cc

@@ -60,8 +60,8 @@ static void run_senders( size_t max, const std::string& s_host, size_t count = 5
 	}
 
 	UniSetUDP::UDPMessage mypack;
-	mypack.nodeID = 100;
-	mypack.procID = 100;
+	mypack.header.nodeID = 100;
+	mypack.header.procID = 100;
 
 	for( size_t i = 0; i < count; i++ )
 	{
@@ -92,13 +92,11 @@ static void run_senders( size_t max, const std::string& s_host, size_t count = 5
 	}
 
 	size_t packetnum = 0;
-	UniSetUDP::UDPPacket s_buf;
-
 	size_t nc = 1;
 
 	while( nc ) // -V654
 	{
-		mypack.num = packetnum++;
+		mypack.header.num = packetnum++;
 
 		// при переходе черех максимум (UniSetUDP::MaxPacketNum)
 		// пакет опять должен иметь номер "1"
@@ -111,11 +109,10 @@ static void run_senders( size_t max, const std::string& s_host, size_t count = 5
 			{
 				if( udp->poll(100000, Poco::Net::Socket::SELECT_WRITE) )
 				{
-					mypack.transport_msg(s_buf);
-					size_t ret = udp->sendBytes((char*)&s_buf.data, s_buf.len);
+					size_t ret = udp->sendBytes(&mypack, sizeof(mypack));
 
-					if( ret < s_buf.len )
-						cerr << "(send): FAILED ret=" << ret << " < sizeof=" << s_buf.len << endl;
+					if( ret < sizeof(mypack) )
+						cerr << "(send): FAILED ret=" << ret << " < sizeof=" << sizeof(mypack) << endl;
 				}
 			}
 			catch( Poco::Net::NetException& e )

extensions/UNetUDP/unet-udp-tester.cc

@@ -223,9 +223,7 @@ int main(int argc, char* argv[])
 			{
 				UDPReceiveU udp(s_host, port);
 
-				//                char buf[UniSetUDP::MaxDataLen];
 				UniSetUDP::UDPMessage pack;
-				UniSetUDP::UDPPacket buf;
 				unsigned long prev_num = 1;
 
 				int nc = 1;
@@ -257,27 +255,35 @@ int main(int argc, char* argv[])
 							continue;
 						}
 
-						size_t ret = udp.receiveBytes(&(buf.data), sizeof(buf.data) );
-						size_t sz = UniSetUDP::UDPMessage::getMessage(pack, buf);
+						size_t ret = udp.receiveBytes(&pack, sizeof(pack) );
 
-						if( sz == 0 )
+						if( ret < 0 )
 						{
-							if( pack.magic != UniSetUDP::UNETUDP_MAGICNUM )
-								cerr << "(recv): BAD PROTOCOL VERSION! [ need version '" << UniSetUDP::UNETUDP_MAGICNUM << "']" << endl;
-							else
-								cerr << "(recv): FAILED header ret=" << ret
-									 << " sizeof=" << sz << endl;
+							cerr << "(recv): no data?!" << endl;
+							continue;
+						}
 
+						if( ret == 0 )
+						{
+							cerr << "(recv): connection closed?!" << endl;
+							continue;
+						}
+
+						pack.ntoh();
+
+						if( pack.header.magic != UniSetUDP::UNETUDP_MAGICNUM )
+						{
+							cerr << "(recv): BAD PROTOCOL VERSION! [ need version '" << UniSetUDP::UNETUDP_MAGICNUM << "']" << endl;
 							continue;
 						}
 
 						if( lost )
 						{
-							if( prev_num != (pack.num - 1) )
-								cerr << "WARNING! Incorrect sequence of packets! current=" << pack.num
+							if( prev_num != (pack.header.num - 1) )
+								cerr << "WARNING! Incorrect sequence of packets! current=" << pack.header.num
 									 << " prev=" << prev_num << endl;
 
-							prev_num = pack.num;
+							prev_num = pack.header.num;
 						}
 
 						npack++;
@@ -315,8 +321,8 @@ int main(int argc, char* argv[])
 				udp->setBroadcast(broadcast);
 
 				UniSetUDP::UDPMessage mypack;
-				mypack.nodeID = nodeID;
-				mypack.procID = procID;
+				mypack.header.nodeID = nodeID;
+				mypack.header.procID = procID;
 
 				if( !a_data.empty() )
 				{
@@ -352,8 +358,11 @@ int main(int argc, char* argv[])
 
 				Poco::Net::SocketAddress sa(s_host, port);
 				udp->connect(sa);
+<<<<<<< HEAD
 
 				UniSetUDP::UDPPacket s_buf;
+=======
+>>>>>>> 2.9.0-alt1
 
 				size_t nc = 1;
 
@@ -362,7 +371,7 @@ int main(int argc, char* argv[])
 
 				while( nc )
 				{
-					mypack.num = packetnum++;
+					mypack.header.num = packetnum++;
 
 					// при переходе через максимум (UniSetUDP::MaxPacketNum)
 					// пакет опять должен иметь номер "1"
@@ -373,16 +382,14 @@ int main(int argc, char* argv[])
 					{
 						if( udp->poll(UniSetTimer::millisecToPoco(tout), Poco::Net::Socket::SELECT_WRITE) )
 						{
-							mypack.transport_msg(s_buf);
-
 							if( verb )
-								cout << "(send): to addr=" << addr << " d_count=" << mypack.dcount
-									 << " a_count=" << mypack.acount << " bytes=" << s_buf.len << endl;
+								cout << "(send): to addr=" << addr << " d_count=" << mypack.header.dcount
+									 << " a_count=" << mypack.header.acount << endl;
 
-							size_t ret = udp->sendBytes((char*)&s_buf.data, s_buf.len);
+							size_t ret = udp->sendBytes(&mypack, sizeof(mypack) );
 
-							if( ret < s_buf.len )
-								cerr << "(send): FAILED ret=" << ret << " < sizeof=" << s_buf.len << endl;
+							if( ret < sizeof(mypack) )
+								cerr << "(send): FAILED ret=" << ret << " < sizeof=" << sizeof(mypack) << endl;
 						}
 					}
 					catch( Poco::Net::NetException& e )