large message Transmission Jetson Thor to windows
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 45/100
- Tipo de issue
- Error
- Claridad
- Bastante claro
- Estado de actividad
- Tranquilo
- Stack tecnológico
- python
Línea de trabajo
Reproduce el intercambio entre el cliente de Windows y el servidor Jetson Thor usando dds.xml, server.py y client.py, primero con mensajes de menos de 1 MB y después con el payload de 2 MB. Empieza comprobando la configuración de FragmentSize y el error UDP reportado, incluida la configuración de CYCLONEDDS_URI en el código. Se considera terminado cuando una solicitud y una respuesta grandes se completan correctamente con una configuración válida documentada.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
windows 10 as client ,send message to jet son
jetson Thor Arm64 as server, receive message and return back to client
i hava build from c source ,and pip install cyclonedds on jetson,
when i send message less 1M ,it's ok, when I send message over 1M , i got some errors:
- when i set FragmentSize to 64kB ,i got python: config: //CycloneDDS/Domain/General/FragmentSize/#text: 64kB: value out of range , i have no idea what is the max FragmentSize
- so i common FragmentSize , but client error: 1784015961.173836 [0] 11748: ddsi_udp_conn_write to udp/192.168.0.101:47404 failed with retcode -58
- on windows ,set CYCLONEDDS_URI not work ,so i set it in code os.environ
blow is my code and config file
dds.xml:
<?xml version="1.0" encoding="UTF-8" ?>
<CycloneDDS xmlns="https://cdds.io/config"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="https://cdds.io/config https://raw.githubusercontent.com/eclipse-cyclonedds/cyclonedds/iceoryx/etc/cyclonedds.xsd">
<Domain>
<General>
<Interfaces>
<NetworkInterface address="192.168.0.101"></NetworkInterface>
</Interfaces>
<MaxMessageSize>10MB</MaxMessageSize>
<FragmentSize>64kB</FragmentSize>
</General>
<Internal>
<MaxSampleSize>100MB</MaxSampleSize>
<Watermarks>
<WhcHigh>50MB</WhcHigh>
</Watermarks>
<!-- socket buffer -->
<SocketReceiveBufferSize min="10MB"/>
<SocketSendBufferSize min="10MB"/>
</Internal>
</Domain>
</CycloneDDS>
server.py :
import json
from dataclasses import dataclass
from cyclonedds.domain import DomainParticipant
from cyclonedds.topic import Topic
from cyclonedds.pub import Publisher
from cyclonedds.sub import Subscriber, DataReader
from cyclonedds.pub import DataWriter
from cyclonedds.idl import IdlStruct
@dataclass
class StringMsg(IdlStruct):
content: str
class ServiceDDS:
def __init__(self, service_name, callback):
self.service_name = service_name
self.callback = callback
self.participant = DomainParticipant()
self.subscriber = Subscriber(self.participant)
self.publisher = Publisher(self.participant)
self.req_topic = Topic(self.participant, service_name + "_request", StringMsg)
self.res_topic = Topic(self.participant, service_name + "_response", StringMsg)
self.reader = DataReader(self.subscriber, self.req_topic)
self.writer = DataWriter(self.publisher, self.res_topic)
print(f"[Service] {service_name} started")
def spin(self):
while True:
samples = self.reader.take()
for sample in samples:
if sample is None:
continue
if not hasattr(sample, 'content'):
continue
req = json.loads(sample.content)
req_id = req["id"]
data = req["data"]
print(f"[Service] Received request req_id {req_id}, data length: {len(data)}")
result = self.callback(data)
res = {"id": req_id, "result": result}
content = json.dumps(res)
print(f"len(msg)==={len(content)}")
msg = StringMsg(content)
#print(f"len(msg)==={len(msg)}")
#print(msg)
self.writer.write(msg)
print('write ok')
#print(f"[Service] Sent response: {result}")
# handle message
def process_big_string(s):
print('have recv msg.... ')
#return "C" * 60 * 1024 * 1024
return s
if __name__ == "__main__":
srv = ServiceDDS("demo_service", process_big_string)
srv.spin()
client.py
import json
import uuid
import time,os
from dataclasses import dataclass
from cyclonedds.domain import DomainParticipant
from cyclonedds.topic import Topic
from cyclonedds.pub import Publisher
from cyclonedds.sub import Subscriber, DataReader
from cyclonedds.pub import DataWriter
from cyclonedds.idl import IdlStruct
from cyclonedds.util import duration
@dataclass
class StringMsg(IdlStruct):
content: str
class ReqDDS:
def __init__(self, service_name):
ip_address = "192.168.0.3"
os.environ["CYCLONEDDS_URI"] = f"""
<Domain>
<General>
<Interfaces>
<NetworkInterface address="192.168.0.3"></NetworkInterface>
</Interfaces>
<MaxMessageSize>10MB</MaxMessageSize>
<!-- <FragmentSize>64kB</FragmentSize> -->
</General>
<Internal>
<MaxSampleSize>100MB</MaxSampleSize>
<Watermarks>
<WhcHigh>50MB</WhcHigh>
</Watermarks>
<!-- socket buffer -->
<SocketSendBufferSize min="20MB"/>
<SocketReceiveBufferSize min="20MB"/>
</Internal>
</Domain>
"""
self.service_name = service_name
self.participant = DomainParticipant()
self.subscriber = Subscriber(self.participant)
self.publisher = Publisher(self.participant)
self.req_topic = Topic(self.participant, service_name + "_request", StringMsg)
self.res_topic = Topic(self.participant, service_name + "_response", StringMsg)
self.reader = DataReader(self.subscriber, self.res_topic)
self.writer = DataWriter(self.publisher, self.req_topic)
print(f"[Client] Created for {service_name}")
def wait_for_service(self, timeout=43200):
start = time.time()
while time.time() - start < timeout:
subs = self.writer.get_matched_subscriptions()
if len(subs) > 0:
print("[Client] Service available!")
return True
print("Client wait Service up!")
time.sleep(1)
print("[Client] wait Service not available!")
return False
def call(self, data):
req_id = str(uuid.uuid4())
req = {"id": req_id, "data": data}
content = json.dumps(req)
msg = StringMsg(content)
self.writer.write(msg)
# 等待响应
while True:
samples = self.reader.take()
for sample in samples:
if sample is None:
continue
res = json.loads(sample.content)
if res["id"] == req_id:
return res["result"]
time.sleep(1)
if __name__ == "__main__":
client = ReqDDS("demo_service")
if client.wait_for_service():
# generate 2M message all is A
big_data = "A" * 2 * 1024 * 1024
#big_data = 'test message less 1M'
print(f"[Client] Sending big string of length {len(big_data)}")
while True:
start_time = time.time()
result = client.call(big_data)
end_time = time.time()
print(f"{result[15]}")
print(f"[Client] Result (length of string): {len(result)}, time {end_time - start_time}")
time.sleep(5)
- Lenguaje dominante
- Python
- Estrellas
- 110
- Forks
- 68
- Merge medio
- 3 d 5 h
- PR fusionados (30 d)
- 1
Preparar el entorno
Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de eclipse-cyclonedds/cyclonedds-python
-
Dificultad 4/5 3-5 días Aptitud para principiantes 52/100
-
Generated Python code is not interoperable when a union contains a member called "value"Quizá libre de nuevo Un pull request para esta issue se cerró sin fusionarse. Abierto
Dificultad 3/5 1-2 días Aptitud para principiantes 58/100
-
Dificultad 4/5 3-5 días Aptitud para principiantes 48/100
-
Dificultad 4/5 3-5 días Aptitud para principiantes 48/100
eclipse-cyclonedds/cyclonedds-python#333 · 1 comentario ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
Todos los issues de eclipse-cyclonedds/cyclonedds-python
Issues similares
-
follow-up
Dificultad 2/5 1-3 horas Aptitud para principiantes 62/100
Los mantenedores suelen responder en 1 día
-
Download helper still uses huggingface_hub arguments removed in 1.0: USE_SYMLINKS is silently ignored and every download ends with a WinError 3 linePosiblemente ocupada @li-lizhe la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
-
IPv6 node addresses produce an invalid request URLPosiblemente ocupada @RaphaelFakhri la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
typesense/typesense-python#154 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
elastic/elasticsearch-py#3592 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 77/100
developmentseed/titiler-cmr#250 · 1 comentario ·
Los mantenedores suelen responder en 1 día