Segmentation fault in TensorRT 10.3 during Myelin compilation of PointCNN-style model on Jetson Orin NX

Ouverte
#4,840 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub

Les mainteneurs répondent en général sous 6 jours

Personne n'a encore pris cette issue.

Évaluation

Difficulté
5/5
Temps estimé
Plus d'une semaine
Accessibilité débutants
30/100
Type d'issue
Bug
Clarté
À clarifier
Activité
Active

Piste de recherche

Commencez par la commande trtexec fournie et le point d’entrée model.onnx, en vous concentrant sur la région xconv_1_X_2_KK → MatMul → Transpose → Depthwise Conv pendant la compilation Myelin. Comparez les configurations signalées pour precision, optimization-level et diagnostics ; le travail est terminé lorsqu’une cause reproductible, une voie de diagnostic supplémentaire ou une solution de contournement confirmée a été identifiée malgré l’indisponibilité du modèle propriétaire.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Description

Module:Engine Build

Description

I am attempting to build a TensorRT engine for a proprietary PointCNN-derived point cloud classification model on Jetson Orin using TensorRT 10.3.0.
The model executes correctly in TensorFlow and ONNX Runtime, but TensorRT consistently crashes during engine generation. The failure occurs during Myelin compilation, before inference execution.
The crash is reproducible with both NVIDIA trtexec and a custom application using the TensorRT API, suggesting the issue is not application-specific.
The model contains PointCNN XConv blocks involving neighborhood gathering, MatMul, reshapes, transposes, and depthwise convolutions.

TensorRT successfully:

-Parses the ONNX model
-Performs tactic selection
-Profiles kernels
-Starts Myelin compilation

The segmentation fault always occurs during compilation of the same XConv region.

Environment

TensorRT Version: 10.3.0

NVIDIA GPU: Jetson Orin NX 16GB

NVIDIA Driver Version: 540.4.0

CUDA Version: CUDA 12.6 (JetPack 6.2)

Operating System: Ubuntu: 22.04

Python Version (if applicable): 3.10.12

Tensorflow Version (if applicable): TensorFlow 1.15.2

PyTorch Version (if applicable): N/A

Baremetal or Container (if so, version): Baremetal Jetson device

Relevant Files

Model link: Unfortunately I cannot share the model. However, the model is: TensorFlow 1.15 PointCNN-derived point cloud classifier and the problematic section corresponds to the first XConv block. TensorFlow tensor shapes in the failing region are:

xconv_1_nn_fts_input:0 (1, ?, 7, 18)
xconv_1_X_2_KK:0 (?, 1024, 7, 7)
xconv_1_fts_X:0 (?, 1024, 7, 18)

The failure occurs around:

xconv_1_X_2_KK
↓
MatMul (xconv_1_fts_X)
↓
Transpose
↓
Depthwise Conv

Steps To Reproduce

Commands or scripts: Build using:

trtexec
--onnx=model.onnx
--minShapes=features:0:1x1024x1,points:0:1x1024x3
--optShapes=features:0:1x1024x1,points:0:1x1024x3
--maxShapes=features:0:1x1024x1,points:0:1x1024x3
--verbose

I also tried --fp16, --fp32, --noTF32, builderOptimizationLevel=0, 1, 2, 3.

All configurations fail in the same location.

I also tried exporting the ONNX with --target tensorrt

Have you tried the latest release?: TensorRT version: 10.3.0

Can this model run on other frameworks? For example run ONNX model with ONNXRuntime (polygraphy run <model.onnx> --onnxrt): yes, the model runs successfully in TensorFlow and ONNX Runtime

Question
Is there any recommended way to disable the problematic fusion or obtain additional diagnostics around the Myelin compilation stage?

Langage dominant
C++
Étoiles
13.5k
Forks
2.4k
Merge moyen
6 j 21 h
PR mergées (30 j)
3

Préparer son environnement

Par où commencer

  1. Lisez l'issue en entier, puis le guide de contribution du projet.
  2. Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
  3. Forkez le dépôt et travaillez sur une branche.
  4. Ouvrez une pull request qui référence le numéro de l'issue.

Autres issues de NVIDIA/TensorRT

Toutes les issues de NVIDIA/TensorRT

Issues similaires

Plus d'issues C++

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.