В последнее время на различных конференциях, связанных с искусственным интеллектом, физический интеллект стал общей темой, и многие из них определяли 2024 год как год физического развития интеллектуальной промышленности, поскольку ранее это были концептуальные исследования, а в этом году начался реальный спрос. В соответствии с определением китайского компьютерного общества, физический интеллект охватывает такие дисциплины, как искусственный интеллект, робототехническое обучение, компьютерное зрение и т.п., принадлежащие интеллектуальным объектам с физическим телом, которые взаимодействуют с физической средой, чтобы получить доступ к парадигме исследований искусственного интеллекта. Так как же это сделать, если инженеры хотят создать свою собственную программу интеллектуальных инноваций? Итак, мы рекомендуем вам программу Jetson Thor чипа nvidia, а также соответствующие ресурсы. Jetson Thor, созданная специально для применения роботов в 1950 году, впервые предложила концепцию «физического интеллекта», но после этого «интеллект» не был достигнут большого прогресса, и очень важно то, что интеллект, основанный на ресурсах программного обеспечения того времени, был практически недостижимым. На конференции 2023 полупроводников ITF World 2023 nevidia основатель и генеральный директор nvidia хван инь хун вновь приподнял свой интеллект, полагая, что следующая волна искусственного интеллекта будет искусственным интеллектом». На GTC 2024 nvidia выпустила платформу для чипов Jetson Thor, созданную специально для гумаников-роботов, которая интегрировалась в очень большое количество nvidia под названием «знать how» о развитии интеллекта. Перед запуском Jetson Thor nvidia выпустила несколько чипов в робототехнике, включая Jetson Orin, Jetson Orin Nano и Jetson AGX Xavier. GPU, CPU, memory, управление питанием и высокоскоростной интерфейс — все продукты серии Jetson. Возьмем, например, Jetson Orin mode group, которая может обеспечить максимальную вычислительную силу до 275 триллионов в секунду операций плавучей точки (TOPS), с конфигурацией памяти от 4GB до 64GB, при котором мощность модуля составляет от 7 до 60 ватт. Jetson Thor продолжает традицию высокопроизводительной серии Jetson, которая может обеспечить производительность AI в 800 триллионов раз в секунду, а также интегрированный процессор безопасности, высокопроизводительный процессор CPU и 100GB пропускная способность. Jetson Thor, как сообщалось ранее в статье, гарантирует высокую производительность чипа, основанную на архитектуре nvidia Blackwell. По сравнению с предыдущим поколением архитектуры Hopper в nvidia, архитектура блэкуэлла принесла в несколько раз больше улучшений во всех отношениях. Кроме того, ядро Blackwell Tensor добавило новую точность и поддержало 4 — битные версии AI, основанные на двигателе второго поколения Transformer, построенном на этой архитектуре, удвоив вычислительную мощность и модель. По словам nvidia, Jetson Thor может выполнять сложные задачи и взаимодействовать с людьми и машинами безопасно, естественным образом, с модульной архитектурой, нацеленной на производительность, энергоемкость и оптимизацию размера. Как уже говорилось выше, в серии разработки Jetson, nvidia Jetson — это решение, ориентированное на развитие роботов, которое удовлетворяет производительность и бюджетные потребности различных приложений. В этой программе, помимо высокопроизводительных, высокоинтегрированных платформ для чипов, имеются богатые комплексные ресурсы. Например, Jetson series интегрирует JetPack SDK, Metropolis microseries, готовую к производству пакет программ Isaac ROS и рабочий процесс, ориентированный на приложение. JetPack SDK является источником для Jetson Linux, инструментов разработчиков, библиотек ускорения CUDA-X и других технологий NVIDIA. JetPack SDK создал базовые возможности для различных приложений к роботам, при помощи JetPack SDK разработчики могут использовать tenсорrt и cuDNN для ускорения дедукции ии, CUDA для ускорения универсальных вычислений, VPI для ускорения компьютерной визуализации и обработки изображений, Jetson Linux API используется для ускорения мультимедийных процессов, libArgus и V4l2 для ускорения обработки фотоаппаратов. В то же время, используя Jetson Linux, разработчики могут разработать различные приложения, содержащие ядро Linux, загрузочный накопитель, NVIDIA драйверы, блестящие утилитарные программы, примеры файловых систем и платформы Jetson, что позволяет разрабатывать приложения очень быстро. Суммируя это, в JetPack SDK SDK, с очень богатой функцией сегмента, друзья-инженеры могут выбирать по своему усмотрению. Еще раз взглянем на пакет software Isaac ROS, который используется для автоматической операционной системы, включая несколько опций с открытым исходным кодом. Isaac ROS предоставляет отдельные пакеты программного обеспечения (GEM) и полные трубопроводы с функциями обработки изображений и компьютерного зрения, чтобы помочь роботу в создании системы восприятия с высоким пропуском; Isaac ROS, модулированный пакет программного обеспечения, позволяет разработчикам менять части алгоритма в зависимости от их потребностей; Isaac ROS обладает исключительной совместимостью, способной существенно сократить цикл разработки программ для роботов. Одним словом, Isaac ROS — это хорошо функционирующий и модульный пакет программ восприятия, обеспечивающий высокопроизводительное восприятие и аппаратное ускорение для роботов. Invidia, ориентированная на работников образования, студентов и факулеров, также предоставляет комплекты разработчиков Jetson Nano, которые могут помочь разработчикам в разработке программ для преподавателей, обучения и разработки ии, интегрированных с роботами. В дополнение к богатым комплексным ресурсам разработки, мы также хотели бы напомнить о передовых идеях nvidia в отношении больших интеллектуальных моделей, основанных на модели Project GR00T, являющейся моделью типа VLA, имеющей форму языка, движения и специализированных робототехники, и основной модельной линии для будущих исследований в области разумного развития. Эти знания и ресурсы можно получить от проекта nvidia GR00T или от комбинации инструментов Isaac. Микросхемы nvidia Jetson Thor — высокопроизводительный чип мышления, разработанный компанией специально для использования роботов, а также аппаратное решение, разработанное компанией Jetson series для будущих интеллектуальных приложений, характеризуется высокой вычислительной мощностью, высокой интеграцией и интеграцией. В то же время nvidia предоставляет обширные ресурсы программного обеспечения, которые могут быть найдены на низших уровнях SDK до уровня операционной системы, с тем чтобы обеспечить быстрое развитие приложений для роботов, таких как SDK.