Відео

Можливо і так. Якщо подивитися на загальний простір, то тільки аналогові камери наявні. Мабуть я пропустив, а де обговорювалися Global Shutter? Бо я не перекладений варіант вирізав- трохи був не впевнений як вимовляють: «шутер» чи «шатер» :)

@@HerdingElectrons в описі камери було "затвор загальної дії", в FPV вони не використовуються, тому мабуть про них ніде не кажуть, але в машинному зорі вони часто must have. інколи перекладають як "глобальний затвор", або простіше "глобал шатер", але то не принципово )

@ дякую, візьму до уваги.

Я на Світлій стороні Сили, то точно :)

Такі справи.

То напевно маються на увазі дверні дзвінки з камерами. Я таке не досліджую і взагалі не варто звертати увагу що там говорять.

Та ні. Я розказую публічно доступну інформацію. Я сподіваюсь, що це зможе зменшити вплив технічної дезінформації з російського інтернету. Це допомагає їм тримати нас на нижчому технологічному рівні. Дрон має бути не найдешевший, дрон має бути найефективніший.

Наразі мені складно прокоментувати щось про Hailo 8l, у мене немає цієї системи і я поки що не планую її вивчати. Я не знайшов ніякої інформації про внутрішню архітектуру чіпа, тяжко щось проаналізувати. Але ось тут є деякі цікаві моменти: community.hailo.ai/t/my-model-runs-slower-than-expected/125 Вони пишуть що ефективність сильно залежить од пропускної здатності PCIe і процесора на хост системі. Це не є добре. Одна справа, коли ви використовуєте це у слоті М.2 х86 компютера і інша справа Raspberry Pi.

Дякую!

Дякую! Бажаю успіхів :)

Привіт! Я хочу поексперементувати з деякими алгоритмами, як то Dense Optical Flow, передбачення траєкторії цілі і розібратися із камерами від Тесли.

@HerdingElectrons керування поки ні?

Керування то окрема цікава тема. У цього SoC є не задіяний RT процесор, то можливо я його використаю якраз під RT задачі.

Живу на Східному узбережжі. Часом язик заплутується в словах, не завжди встигаю згадати значення.

Там мало піти повідомлення на LinkedIn

@@HerdingElectrons як вас знайти в LinkedIn?

Я зустрічав великі дейтасети на десятки гігабайт, але потрібно дивитися що там є насправді всередині.

@@HerdingElectrons є у воених але там тре авторизуватися

Таких даних я не маю, точно. Через те я робив свою кіностудію. Можна збільшити масштаби, якщо є ресурс. Я думаю що це буде навіть краще, знімати відео у контрольованому енвайроменті з контрольованими варіаціями, по світлу, наприклад. Ось: www.horizonhobby.com/product/replacement-airframe-delta-ray-one/EFL9501.html Мені це щось нагадує. Можна пофарбувати у будь який колір і знімати під різними кутами вдень і вночі. Можна навіть прифантазувати якийсь ангар для зйомок у польоті. Ось є ще такого типу: www.ebay.com/itm/255894484902?mkcid=16&mkevt=1&mkrid=711-127632-2357-0&ssspo=hoqId8nsQeu&sssrc=4429486&ssuid=il9ANVKbR3q&var=&widget_ver=artemis&media=COPY

@@HerdingElectrons а у вас випадково немає посилання на дейтасети про які ви згадали?

Мабуть, непоганий початок: anti-uav.github.io/dataset/

Я, звичайно, не дейта сайнтіст. Я спробував узагальнити свій минулий досвід, коли модель ставала гіршою при довшому тренуванні. Мабуть це пояснюють в IBM: “Another sign of an overfit model is its decision boundaries, the model’s learned rules for classifying data points. The decision boundary becomes overly complex and erratic in overfit models, as it adapts to noise in the training set rather than capturing true underlying structures, further indicating overfitting.”

@@HerdingElectrons Може ви просто не дуже чітко висловились, бо "коли модель ставала гіршою при довшому тренуванні" це саме і є оверфітінг, бо модель просто запам'ятовує ваш тренувальний датасет, якщо грубо. Але це не через збільшення кількості тренувальних данних, а через збільшення кількості тренувальних епох на одних і тих же даних. Я не знаю чи в цьому пайплайні, який ви використовуєте, є автоматичне додавання аугментацій, але якщо немає - обов'язково спробуйте їх додати.

Так, подивлюсь обовʼязково, дякую :) я боюся довгих процесів ще з часів, коли ми моделювали фізичні процеси з використанням рядів. Там з певного моменту похибка починала різко зростати через обмеження точності яке виражалося як цифровий шум. Через те я вибрав 16 біт тензор, ніби працює краще.

@@HerdingElectrons Так, для моделювання фіз. процесів збільшення precision-а дуже важливе, бо похибки накопичуються при обчисленнях, та ми працюємо з меншою кількістю параметрів, але їх точні значення важливі. Але для нейронних мереж на практиці precision компенсується кількістю параметрів в моделі. Тобто квантизована модель з більшою кількістю параметрів зазвичай працює краще ніж менша модель з більшою точністю вагів. Ну і швидкість обробки суттєво відрізняється. Але у вашому випадку через те, що ви використовуєте одну і ту ж модель з різною точністю, більша точність буде працювати краще, скоріше за все, а може і буде працювати так само як квантизована. Треба тестувати та шукати світспот.

Точно. Потрібно більше тестів. Мої 331 зображення то взагалі не показово, дуже мало для висновків. Але дякую за поради! Дуже корисно :)

Так це непроста задача. Я дуже мало знаю про наземні дрони. Має бути комбінація лідара і віжуал, очевидно. Але це не вирішить проблему само по собі. Спробую, як буде можливість.

Дякую! Продовжую працювати. Ще кілька алгоритмів потрібно спробувати.

На якомусь етапі можна використати і Гугл Колаб, але він не дає повного циклу, що включає генерацію і оптимізацію генеруємої моделі під таргет платформу. І Гугл це більше про Тензорфлов. З Торсч усе таки трохи легше працювати.

Так, я це помітив. Надто мало було інформації для тренування. Можна було змістити поріг валідності на більш високий.

Я хочу щоб воно працювало автономно, без оператора і на відстані до 100 км.

@@HerdingElectrons Потрібно робити реконструкцію місцевості в 3d. Це досить складно бо потрібен 3d рушій. OpenGL може не підійти, але можна написати свою спрощену версію.

От чим подобається мені ці платформа, що там є SfM та DoF прямо в SDK :)

Я тут хотів показати що ця платформа в принципі працює, тепер хочу додавати функціонал.

Ааа… навіть не зразу зрозумів, про що Ви пишете. Про модель буде наступне відео. Про документацію то ви маєте на увазі сайт самого Біглборд. Про айдл режим і перегрівання: що мається на увазі айдл режим у системі яка працює безперервно. Ви використовували якийсь радіатор? Наскільки мені відомо, Бігоборд ще не має працюючого АІ для своєї плати взагалі. Це зараз просувається окремими ентузіастами :)

Так, можливо. Але відстань між камерами досить незначна і на 50 метрів складно буде визначити якесь зміщення при 1000 пікселів по горизонталі. Я через якийсь час зможу перевірити що бачать камери, сподіваюсь. Десеріалайзер у мене вже є, лишилось тільки коректно зконфігурувати сенсори :)

@@HerdingElectrons Відомі параметри камери та лінз? Відстані між камерами? Тоді можна порахувати на скільки далеко вона може "бачити". Ще питання цілей, якщо ми говоримо про візуальну одометрію то і 20 метрів буде достатньо для визначення траекторії руху

Відстань між камерами не складно поміряти а от про лінзи нічого не відомо. Сподіваюсь вдасться взнати експериментальним шляхом. На даний момент мене цікавить задача визначення цілі і її відносної траєкторії (і дрон і ціль рухаються одночасно) у повністю автоматичному режимі, без оператора. Стосовно Тесли, то на великій швидкості бажано щось починати бачити хочаб метрів за 100-150. Але тут я не можу точно сказати.

@@HerdingElectrons якщо відома висота відносно землі то положення цілі в системі координат дрона можна визначити за допомогою однієї камери. Так похибка на великих відстанях може бути досить великою, але цього буде достатньо для того щоб дрон міг долетіти до цілі і при наближенні похибка буде ставати меншою. Але звичайно дві камери значно краще для такої задачі :)

Там навіть не похибка… там може ціль виглядати як щось менше за піксель :)

Дякую, я так думаю, що у мене є відповідь. Зараз я працюю над наступним епізодом, там буде.

👍

Дякую за коментар. Незабаром буде друга частина.

Вам дякую :)

Я, останнім часом, був програмістом.

@@HerdingElectrons За яким напрямом?

Було багато напрямків. Останні 15 років “high performance computing” для фінансових сервісів компаній на Вол Стріт. Відомі як Stock Exchange.

Привіт! Вам потрібно мати кабельок для консолі, типу ось такого: www.aliexpress.us/item/3256806028875349.html?spm=a2g0o.productlist.main.1.6b47e2z8e2z8uQ&algo_pvid=586493d4-c218-4012-8379-2fbae2a0e0ee&algo_exp_id=586493d4-c218-4012-8379-2fbae2a0e0ee-0&pdp_npi=4%40dis%21USD%212.88%210.99%21%21%212.88%210.99%21%402103205117337613857473152efdea%2112000036317363020%21sea%21US%210%21ABX&curPageLogUid=yzUdi0LDAeYC&utparam-url=scene%3Asearch%7Cquery_from%3A а потім, коли завантажиться імідж з карточки, можна заходити через ssh і копіювати через scp.

Правда, потрібно уточнити про яку саме плату йде мова. JST конектори бувають різні.

@@HerdingElectrons BeagleBone AI 64

@@HerdingElectrons ви як свою підключали? через type c ? ви підключали ще додаткове живлення на 5 вольт? я от таку саму як у вас пидбав, и іі комп тупо не бачить, драйвера я офіційні не знайшов, а по гайду вона повинна видна як флешка

@@HerdingElectrons а у нас в украііні не можна десь знайти такий кабель? і без нього ніяк не вийде підключитись? я ще хотів спитати, я купив Servo Cape, і камеру машиного зору,але ця камера доволі дорога і іі підключити не так легко, як я зрозумів

а де його купити? на офф сайті не знайшов, а до нього можна підключити сервоприводи?

а програмування на microPhyton можливо?

а можно з вами звязатись?

А інша плата то яка?

@@HerdingElectrons ій далеко до вашоіі, повірьте)

Привіт! Можете написати ось на цей імейл: olehzdubna@gmail.com ? Дякую :)

Hi Greg! Sure, I will put changed files in a git repo somewhere.

... and here it is: I put short notes about my changes on the GitLab, you can check here: gitlab.com/bby-ai/sdk-changes Let me know if any issues.

Дякую! Продовження буде.

Моєю метою є створення політного модуля, який здатний працювати в режимах від ручного до повністю автономного. Цей ExpressLRS модуль на столі був підʼєднаний до плати Beaglebone AI-64, мій інший проєкт. Я портував PX4 Autopilot на один із вільних процесорів усередині SoC цієї плати. Є плани, також, перенести PX4 на BeagleY-AI також. Все що зараз вимагає три окремих плати розміститься на одному чіпі. А якщо робити серію на платі разом із чіпом можна розмістити і сенсори. ESC треба виносити назовні, усе-таки дуже великі комутаційні шуми.

Так, тема цікава. Але потребує залучення людей добре знайомих з певними сферами математики.

Ця проблема легко вирішується. Ну, а якщо, ви замовляєте 1000 плат то проблема ще легше вирішується.

Ага, здогадався, тайпси це Type-C :) У цього SOC все на одному кристалі: політний контролер, компаньйон компютер і DL процесор. Обмінюються даними через регіони в спільній памяті.

Цей Lichee на базі ядра від Alibaba? Ця річ орієнтована на ІоТ і має дуже скромні характеристики. Даташіт на сім сторінок без якої небудь конкретної інформації. З RISC V, я так розумію, на даний момент зоопарк, специфікація відкрита і кожна фірма чи студент робить свій ISP.

@@HerdingElectrons нуууу та, десь так як ви сказали, так на IoT але там впринципі є всі компоненти для дрона, включаючи відео енкодери

SoC SG2002

Погоджуюсь, характеристики прості відносно, але це для яких завдань, для фпв з донаведенням мало б хватити

Перші два питання: 1. Доступність готового програмного забезпечення у форматі сорс коду. 2. Якісна документація. Без NDA. 3. Ціна. AliExpress «Sipeed Nezha 64bit RISC-V Linux SBC Board, Allwinner D1@1.0GHz with 1GByte DDR3, Support Tina/Debian System» хоче продати за $112. Не виглядає як щось таке дуже цікаве.

Hi, yes, I’m here since early 2000s. I’m more a system developer. I’m not dedicated to AI only. I didn’t have a chance to work with discrete signals so far, but would figure it out.

Саме так!!! 7:45

Цікава річ. Але дещо закрита для вільної розробки. Ні доків ні сорс коду.

… мені цікаво було знати, скільки там є памяті, наприклад для параметрів.

Привіт, там і-мейл є на моїй сторінці в Ю-Тюб, його видно на компʼютері, не мобілці.

Дякую!

Я так думаю, що такі подібні труднощі має і «не штучний» інтелект. Проблему допоможе вирішити введеня інших данних, як то координати, наприклад.

Усе добре, дякую. Трохи був зайнятий останнім часом.

Добре, дякую. Візьму до уваги :)

Я використав GroundControl у першу чергу, для відлагодження самого Mavlink у політному контролері. Я зробив деякі суттєві зміни у порівняні з «ванільним» PX4 з огляду на нові можливості SOC. Я планую випробувати Mission Planner також.

Основна проблема це надзвичайно велика кількість коду, в якому треба розібратися. Я порахував у самому TI SDK десь до десяти мільйонів рядків коду у .с і .h файлах. Треба буде десь занотувати число. Для звязку у мене десь чекають пара LoRa трансіверів, можливо варто глянути і на wfb-ng…

Я вже встановив на jetson nano wfb-ng та mavproxy, під'єднав до ardupilot це air. Також встановив wfb-ng на Raspberry Pi 4 це ground. Зв'язок є, усе працює. Але не можу змусити працювати відео на qgroundcontrol Raspberry pi 4...

Я не планую передавати відео напряму, але я бачив відео месіджі у протоколі Мавлінк. Ви каже е про відео стрім із флайт контролера до QGC?

​@@HerdingElectronsцей SDK складає більшість для збірки Linux, сподіваюсь

@@HerdingElectrons Ні через mavlink відео не передаєця. Передаєця через udp та gstreamer. Я кажу провідео від JN на GGC