Bằng cách nhấp vào “Chấp nhận tất cả Cookie”, bạn đồng ý với việc lưu trữ cookie trên thiết bị của mình để tăng cường khả năng điều hướng trang web, phân tích việc sử dụng trang web và hỗ trợ các nỗ lực tiếp thị của chúng tôi. Thêm thông tin
Cài đặt Cookie
Bằng cách nhấp vào “Chấp nhận tất cả Cookie”, bạn đồng ý với việc lưu trữ cookie trên thiết bị của mình để tăng cường khả năng điều hướng trang web, phân tích việc sử dụng trang web và hỗ trợ các nỗ lực tiếp thị của chúng tôi. Thêm thông tin
Khám phá cách triển khai Ultralytics YOLO11 TRÊN NVIDIA Jetson Orin Nano Super mang lại điểm chuẩn ấn tượng và GPU - tăng tốc hiệu suất cho các ứng dụng AI tiên tiến.
Bộ công cụ NVIDIA Jetson Orin Nano Super Developer Kit, ra mắt ngày 17 tháng 12 năm 2024, là một siêu máy tính AI tạo sinh nhỏ gọn nhưng mạnh mẽ, được thiết kế để mang lại khả năng tiên tiến cho điện toán biên . Nó hỗ trợ xử lý thời gian thực và loại bỏ nhu cầu điện toán đám mây. NVIDIA Jetson Orin Nano Super cho phép các nhà phát triển xây dựng các hệ thống thông minh giá cả phải chăng, hoạt động hiệu quả trong môi trường cục bộ.
Khi được kết hợp với các mô hình Ultralytics YOLO như Ultralytics YOLO11 , Jetson Orin Nano Super có thể xử lý một loạt các ứng dụng Vision AI tại biên. Cụ thể, YOLO11 là một mô hình thị giác máy tính được biết đến với tốc độ và độ chính xác trong các nhiệm vụ như phát hiện đối tượng , theo dõi đối tượng và phân đoạn trường hợp.
Kết hợp YOLO11 khả năng của với GPU (Bộ xử lý đồ họa) mạnh mẽ của bộ công cụ và hỗ trợ cho các khuôn khổ như PyTorch , ONNX , Và NVIDIA TensorRT cho phép triển khai hiệu suất cao. Sự kết hợp này cung cấp cho các nhà phát triển một giải pháp hiệu quả để tạo ra các ứng dụng AI, từ phát hiện vật thể trong robot đến theo dõi vật thể theo thời gian thực trong không gian thông minh và hệ thống bán lẻ.
Trong bài viết này, chúng ta sẽ xem xét NVIDIA Bộ phát triển Jetson Orin Nano Super, cách thức hoạt động với Ultralytics YOLO11 về AI biên , các tiêu chuẩn hiệu suất, ứng dụng thực tế và cách nó có thể giúp các nhà phát triển xây dựng các dự án Vision AI. Hãy bắt đầu thôi!
Cái gì là NVIDIA Bộ phát triển Jetson Orin Nano Super?
Các NVIDIA Jetson Orin Nano Super Developer Kit là một máy tính nhỏ gọn nhưng mạnh mẽ, định nghĩa lại AI tạo sinh cho các thiết bị biên nhỏ gọn. Nó cung cấp hiệu suất AI lên đến 67 TOPS (nghìn tỷ phép tính mỗi giây), lý tưởng cho các nhà phát triển, sinh viên và những người đam mê làm việc trên các dự án AI nâng cao.
Dưới đây là một số tính năng chính của nó:
Hiệu suất GPU : Thiết bị được xây dựng trên NVIDIA Kiến trúc Ampere GPU , bao gồm 1.024 CUDA lõi và 32 Tensor Lõi. CUDA lõi xử lý nhiều tác vụ cùng lúc, tăng tốc các phép tính phức tạp, trong khi Tensor Lõi được chuyên biệt hóa cho các tác vụ AI như học sâu.
CPU mạnh mẽ : Máy được trang bị bộ vi xử lý Arm Cortex-A78AE 6 nhân, được thiết kế để cân bằng giữa tốc độ và hiệu suất. Thiết bị có thể xử lý mượt mà nhiều tác vụ cùng lúc mà vẫn giữ mức tiêu thụ điện năng thấp. Điều này rất quan trọng đối với các hệ thống chạy cục bộ mà không cần nguồn điện lớn.
Bộ nhớ hiệu quả: Bộ kit đi kèm với 8GB bộ nhớ LPDDR5 (Low Power Double Data Rate 5). LPDDR5 là một loại RAM (Random Access Memory) được tối ưu hóa cho tốc độ và hiệu quả năng lượng, cho phép thiết bị xử lý các tập dữ liệu lớn và xử lý theo thời gian thực mà không tiêu thụ quá nhiều điện năng.
Tùy chọn kết nối: Nó bao gồm các cổng USB 3.2 để truyền dữ liệu nhanh chóng, một cổng Gigabit Ethernet để kết nối mạng mạnh mẽ và các giao diện camera để tích hợp các cảm biến hoặc camera.
Công cụ phát triển AI : Jetson Orin Nano Super hoạt động với NVIDIA JetPack SDK, cung cấp các công cụ như CUDA để tính toán nhanh hơn và TensorRT để tối ưu hóa các mô hình AI. Những công cụ này giúp các nhà phát triển xây dựng và triển khai các ứng dụng AI một cách nhanh chóng và hiệu quả.
Điểm chuẩn hiệu suất: Jetson Orin Nano Super so với Orin NX 16GB
Nếu bạn quen thuộc với NVIDIA công việc của, bạn có thể tự hỏi bản phát hành mới này so sánh như thế nào với bản hiện tại NVIDIA Jetson Orin NX 16GB (không có chế độ siêu cấp). Trong khi Jetson Orin NX cung cấp khả năng tổng thể cao hơn, thì Jetson Orin Nano Super Developer Kit lại mang đến hiệu năng ấn tượng với mức giá chỉ bằng một phần nhỏ.
Hiệu suất AI: Jetson Orin Nano Super cung cấp hiệu suất lên đến 67 TOPS, rất tốt cho hầu hết các tác vụ AI biên, trong khi Jetson Orin NX cung cấp lên đến 100 TOPS cho các ứng dụng đòi hỏi khắt khe hơn.
Bộ nhớ: Jetson Orin Nano Super bao gồm 8GB LPDDR5, đủ cho các tác vụ thời gian thực, trong khi Orin NX tăng gấp đôi lên 16GB cho khối lượng công việc lớn hơn.
Hiệu quả năng lượng: Jetson Orin Nano Super tiết kiệm năng lượng hơn và có thể định cấu hình giữa 7W và 25W, so với nhu cầu năng lượng cao hơn của Jetson Orin NX.
GPU : Cả hai đều chia sẻ NVIDIA Kiến trúc Ampere với 1.024 CUDA lõi và 32 Tensor Lõi cho sự mạnh mẽ GPU hiệu suất.
YOLO11 với Jetson Orin Nano Super: Mang AI tầm nhìn đến tận cùng
Bây giờ chúng ta đã hiểu rõ hơn về Jetson Orin Nano Super, hãy cùng xem xét cách YOLO11 có thể can thiệp để đưa khả năng của Vision AI đến gần hơn. Ultralytics YOLO các mô hình, bao gồm YOLO11 , đi kèm với các chế độ linh hoạt như đào tạo, dự đoán và xuất, giúp chúng có thể thích ứng với nhiều quy trình làm việc AI khác nhau.
Ví dụ, trong chế độ đào tạo, Ultralytics YOLO các mô hình có thể được tinh chỉnh và đào tạo trên các tập dữ liệu tùy chỉnh cho các ứng dụng cụ thể, chẳng hạn như phát hiện các đối tượng duy nhất hoặc tối ưu hóa cho các môi trường cụ thể. Tương tự như vậy,Chế độ dự đoán được thiết kế cho suy luận, cho phép thực hiện các tác vụ thị giác máy tính theo thời gian thực. Cuối cùng, chế độ xuất có thể được sử dụng để chuyển đổi mô hình sang các định dạng được tối ưu hóa cho việc triển khai.
Hình 3. Ultralytics YOLO các mô hình hỗ trợ nhiều tính năng và chế độ khác nhau.
YOLO11 ở chế độ xuất hỗ trợ một loạt các tùy chọn triển khai mô hình, bao gồm:
NVIDIATensorRT : Định dạng này được tối ưu hóa cho NVIDIA GPU cung cấp hiệu suất cao và độ trễ thấp trên Jetson Orin Nano Super.
ONNX (Trao đổi mạng nơ-ron mở) : Đảm bảo khả năng tương thích trên nhiều nền tảng khác nhau, giúp nó trở nên linh hoạt cho các hệ sinh thái phần cứng và phần mềm khác nhau.
TorchScript : Định dạng này lý tưởng cho PyTorch -ứng dụng dựa trên, giúp tích hợp liền mạch vào PyTorch quy trình làm việc.
TFLite ( TensorFlow Lite) : Định dạng được thiết kế cho việc triển khai AI nhẹ, hoàn hảo cho các hệ thống di động và nhúng.
Sử dụng các định dạng triển khai này, các nhà phát triển có thể tận dụng tối đa phần cứng của Jetson Orin Nano Super để chạy YOLO11 cho các ứng dụng thời gian thực như không gian thông minh, robot và tự động hóa bán lẻ.
Đánh giá chuẩn YOLO11 trên NVIDIA Jetson Orin Nano Super
Tiếp theo, để có ý tưởng tốt hơn về tốc độ YOLO11 có thể chạy trên NVIDIA Jetson Orin Nano Super, hãy cùng khám phá hiệu suất ấn tượng và điểm chuẩn của nó bằng cách sử dụng GPU -các định dạng xuất khẩu được tăng tốc như PyTorch , ONNX , Và TensorRT . Các thử nghiệm này cho thấy Jetson Orin Nano Super đạt được thời gian suy luận với YOLO11 các mẫu máy có thể so sánh được - và đôi khi vượt trội hơn - Jetson Orin NX 16GB hiện có (không có chế độ siêu cấp).
Hình 4. So sánh chuẩn YOLO11 TRÊN NVIDIA Jetson Orin Nano Super.
Điều làm cho sản phẩm này trở nên đáng chú ý hơn nữa chính là giá cả phải chăng của Jetson Orin Nano Super. Với hiệu năng mạnh mẽ nhưng giá thành chỉ bằng một nửa Jetson Orin NX 16GB, sản phẩm mang lại giá trị vượt trội cho các nhà phát triển đang xây dựng các hệ thống hiệu suất cao. YOLO11 ứng dụng. Sự kết hợp giữa chi phí và hiệu suất này khiến Jetson Orin Nano Super trở thành lựa chọn tuyệt vời cho các tác vụ AI thị giác thời gian thực ở biên.
Hình 5. So sánh chuẩn YOLO11 trên Jetson Orin NX 16GB.
Hãy thực hành với YOLO11 và NVIDIA Jetson Orin Nano Super
Nếu bạn hào hứng bắt đầu triển khai YOLO11 Trên Jetson Orin Nano Super, có một tin tốt - đó là một quá trình đơn giản. Sau khi flash thiết bị của bạn bằng NVIDIA JetPack SDK, bạn có thể sử dụng hình ảnh Docker dựng sẵn để thiết lập nhanh hoặc cài đặt thủ công các gói cần thiết.
Đối với những người tìm kiếm một tích hợp nhanh hơn và liền mạch hơn, container JetPack 6 Docker được cập nhật là một giải pháp lý tưởng. Docker container là một môi trường di động, gọn nhẹ, bao gồm tất cả các công cụ và dependencies cần thiết để chạy một phần mềm cụ thể.
Các Ultralytics container, được tối ưu hóa cho JetPack 6.1, được tải sẵn CUDA 12.6, TensorRT 10.3 và các công cụ thiết yếu như PyTorch và TorchVision, tất cả đều được thiết kế riêng cho kiến trúc ARM64 của Jetson. Bằng cách sử dụng container này, các nhà phát triển có thể tiết kiệm thời gian thiết lập và tập trung vào việc xây dựng và tối ưu hóa các ứng dụng Vision AI của họ với YOLO11 .
Ứng dụng của YOLO11 trên NVIDIA Jetson Orin Nano Super
Đối với những người đang tìm kiếm nguồn cảm hứng cho dự án AI tiếp theo của bạn, có rất nhiều tiềm năng cho các ứng dụng computer vision dựa trên edge xung quanh chúng ta.
Trong cuộc sống hàng ngày, AI biên đang định nghĩa lại không gian thông minh bằng cách cho phép các hệ thống detect Và track các đối tượng theo thời gian thực, tất cả đều không cần dựa vào xử lý đám mây. Cho dù đó là giám sát giao thông trong một thành phố đông đúc hay xác định hoạt động bất thường ở nơi công cộng, Edge Vision AI đều đang nâng cao tính bảo mật và hiệu quả.
Các nhà bán lẻ cũng đang khai thác AI biên và thị giác máy tính. Từ việc kiểm tra hàng tồn kho tự động đến phòng chống trộm cắp , các mô hình như YOLO11 giúp doanh nghiệp có thể triển khai các giải pháp thời gian thực trực tiếp tại các cửa hàng.
Tương tự, khi nói đến AI trong chăm sóc sức khỏe , giám sát dựa trên biên đảm bảo an toàn cho bệnh nhân, phát hiện bất thường và duy trì sự tuân thủ - tất cả đều không bị chậm trễ do phụ thuộc vào đám mây. Với các công cụ như Jetson Orin Nano Super và YOLO11 , tương lai của Vision AI đang diễn ra ngay tại ranh giới, nơi cần đến nó nhất.
Những điều cần nhớ
Triển khai Ultralytics YOLO các mô hình như YOLO11 trên NVIDIA Bộ công cụ phát triển Jetson Orin Nano Super cung cấp giải pháp đáng tin cậy và hiệu quả cho các ứng dụng AI biên. Với GPU hiệu suất, hỗ trợ liền mạch cho PyTorch , ONNX , Và TensorRT và các điểm chuẩn ấn tượng, nó rất phù hợp cho các tác vụ thị giác máy tính thời gian thực như phát hiện và theo dõi đối tượng.
Những đổi mới và hợp tác trong các công nghệ tiên tiến như Vision AI và tăng tốc phần cứng đang chuyển đổi cách chúng ta làm việc, trao quyền cho các nhà phát triển xây dựng các giải pháp hiệu suất cao, có khả năng mở rộng tại các biên. Khi AI phát triển, các công cụ như YOLO11 và Jetson Orin Nano Super đang giúp việc hiện thực hóa các giải pháp thông minh, thời gian thực trở nên dễ dàng hơn bao giờ hết.
Bạn tò mò về AI? Hãy truy cập kho lưu trữ GitHub của chúng tôi để khám phá những đóng góp của chúng tôi và tham gia với cộng đồng của chúng tôi. Xem cách chúng tôi đang sử dụng AI để tạo ra tác động trong các ngành như nông nghiệp và chăm sóc sức khỏe.