Твоя ПЕРВАЯ НЕЙРОСЕТЬ на Python с нуля! | За 10 минут :3
Вставка
- Опубліковано 30 лип 2023
- Вероятно, самый понятный и нескучный урок по нейросетям с нуля.
Только при помощи Python + NumPy и на реальной задаче, с последующим сохранением модели.
Освойте профессию «Python-разработчика» с нуля в Яндекс Практикуме - clck.ru/357mxW
🆇 Ссылки из видео 🆇
𝟭: Часовой урок по работе с нейросетями на Tensorflow и Pytorch - • Учим Нейронные Сети за...
𝟮: Статья про нейрон смещения - habr.com/ru/articles/313216/
𝟯: Датасет MNIST в формате NPZ - storage.googleapis.com/tensor...
𝟰: Статья про алгоритм Backpropagation - habr.com/ru/articles/198268/
𝟱: Статья про функции активации - habr.com/ru/articles/727506/
𝟲: Графики активационных функций - machine-learning.paperspace.c...
𝟳: Архив с кодом из урока - drive.google.com/file/d/1CtEt...
𝟴:
𝟵:
🆇 Главы 🆇
0:00 - Начало
🔵 Наш TELEGRAM: t.me/howdyho_official
Наш ВК: howdyho_net
Сотрудничество topic-84392011_33285530
💗 Музыка предоставлена UA-cam Audio Library. - Наука та технологія
![[DeepLearning | видео 1] Что же такое нейронная сеть?](http://i.ytimg.com/vi/RJCIYBAAiEI/mqdefault.jpg)
💗 С вас лайк, я честно старался!)
А еще обязательно чекните часовой урок по нейросетям на Tensorflow + PyTorch - ua-cam.com/video/1quKqf47V6s/v-deo.html
Ау хауди а где Джарвис 3?
Хорош братанчик, знал что снимешь более глубокое объяснение
Ты кстати manim попробовал использовать? Если да, то как тебе библиотека?
Хауди Хо™ Как скачать игру, Демка дрифт игры на Unity (эксперимент) v4 которую ти сделал фильм 6 частей вроде
Хауди, сделай видео "Учим Godot 4 за час" или плейлист по Godot 4.1! Этот движок сейчас быстро развивается и классно бы было посмотреть в твоей подаче и русской озвучке, а также язык GDscript очень похож на python!🙂
Это все конечно сложно но я надеюсь Хауди что ты рано или поздно создашь нейросеть которая будет искать бабки в интернете и сбрасывать их на карточку пользователю) Это будет топчик. Я верю в тебя.
проще создать сеть,которая берёт бабки у олигархов и ложит на карту пользователя,но проблема в том что потом за своими бабками придут бандиты и менты🤣🤣🤣
единомышленник нашёлся
Ага но об этом ты не когда не узнаешь
Это про тот самый пост в тг?)
@@user-duignwkfpcb2 не понял о чём, я даже не могу найти свой комментарий, чтобы понять о чём речь
Спасибо за видео!
Спасибо за этот видос, Хауди!!
Подскажите, что за обои у автора ( мб ссылку на wallpaper engine /название). Заранее спасибо
Очень круто! Спасибо большое!
Спасибо, жду виде про временные ряды на tensorflow на примере прогнозирования цены Bitcoin
Хауди, давай больше подобного контента, это суперски. Из русско-язычных мало кто так понятно обьясняет нейросети. Спасибо
Спасибо большое, ты супер!
Супер ❤
Спасибо за урок! Просто и понятно. То, что нужно в самом начале пути!!!
уже пробовала?
Спасибо очень интересно. Искал базовый понятный пример работы нейросети.
На самом деле из видео именно про основы я ничего не понял: какие среды используют для работы с неросетями, ни того, как Пайтон используется для нейросетей - для полноценного понимания видео я уже должен был это знать.
Вот, где действительно нужен матанализ с линейной алгеброй))))
да какой там матанализ лол...
11 классник поймет, математика в более сложных вещах используется
@@TurboGamasek228 ну насчёт того, что это еще не самое сложное, я согласен.
Но в backpropagation при обучении нейросети используются производные как минимум, это уже матанализ))
@@dimondsafkage4620 11 класс
@@dimondsafkage4620тебе же не надо самому дифференцировать ничего. Разве что в образовательных целях.
Супер 🙌
Наконец-то годната😊
Но не у него(( я начал писать и у меня какая- то ошибка
Хороший урок👍👍. А про рекуррентные нейронные сети видео будет???
Хауди какой программой для обработки видео ты пользуешься?❤
И будет ли по ней ролик?
А это разве не оффтоп?
@@MrYbs-ie1jjоффтоп?
Круто, попробовал, да действительно работает!!! Очень доступно и понятно, и все реализовано на широкораспространенных бибилиотеках.
Попробуем 👍
хорошее видео!
сжато и информативно...
Как же я благодарен этому миру, за то что есть хауди и его канал. Не знаю кому как, но мне его подача невероятно помогает . сколько уже тем я благодаря ему освоил, даже посчитать сложно. Всегда дает качественную выжимку сложной темы без лишних углублений, только суть и четкое направление куда копать, чтобы реализовать собственную идею идею.
Спасибо за видос 🔥
Благодарю за урок! Четко, интересно и грамотно изложил.
Вопрос не по теме. Где взять такие обои для рабочего стола? Они просто великолепны!
Пасиба!
Братан, хорош, давай, давай, вперёд! Контент в кайф, можно ещё? Вообще красавчик! Можно вот этого вот почаще?
Харооош
Images, labels = utils.load.dataset() выдает ошибку, что нет такой команды. Что делать?
8:13
Давай видос про свою модель GPT с нуля)
о новий видос❤ ура
Сам помню писал с нуля нейросеть, но именно "мини-библиотеку" для работы с ней (на С++) (это был простой перцептрон и при создании я мог настраивать количество слоев, нейронов, скорости обучения т.д.)... Мудохался 2 месяца, разбирался, учил и пытался перенести все в код. В итоге все заработало. Точность 90-95% и больше. Но когда начал тестить на картинках которых нету в тестовом файле она начала тупить (в среднем порядка 70% точность) думал что переобучил - нет, проверил код на ошибки - все ок, много чего перепробовал и в итоге оказалось что в этом "шедевральном" датасете цифры 6, 7, 9 и вроде 1 рисованы по какому-то шаблону. Цифры 6 и 7 например, буквально большинство нарисовано в верхней части картинки, а 9тки почти все без закругления снизу и больше напоминали "q". В итоге сделал выравнивание по центру и все заработало на ура (на тестах что-то 95%, а на написаных мной 90+%, ну почти так же). Незнаю как у других, может то я что-то не то загрузил или что, но у меня такой прикол был. Я типа грузил картинки в формате .jpg с какого-то левого сайта, может там что-то. Но главное что нейросеть заработала и работает дальше (тестил уже много раз на разных заданиях - все хорошо).
Надо было наоборот не выравнивать, а каждую цифру "размножить" так, чтобы они на разных вариантах были в разных частях поля и можно ещё угол менять
@@lintop3908 да, называется аугментация)
@@lintop3908но тогда пришлось бы дольше обучать, а по сути ничего бы не изменилось
@@lintop3908это называется аугментация данных
а на каком языке ты писал саму нейронку
Как всегда ЛУЧШИЙ ❤
Благодарствую
Здравствуй автор, а вы можете записать гайд по созданию и обучению нейронки и по сборке пк для обучения нейронки допустим на материнской плате X99 D4X8 с двумя сокетами под процессоры зеон ? Спасибо
Круто🔥как всегда качество на все 💯. Даёшь в графическим интерфейсом 😍
Как я понял, больше всего времени занимает преобразование обучающих и тестовых данных к стандарту в обучнии нейронки. А остальное было обьяснение и написание самой нейронки?
Когда сделаешь видео по какому-то интересному проекту? (Типа джарвиса и тд)
Опана, вот это вкусненько
Оо Хауди в рекламе годноту рекламировать начал, держи царский лайк))))
Хауди: посвещает отдельное видео о нейросетях из за того что какому-то челу что то не понравилось.
Половина комментаторов под видео “учим Юнити за час” которая писала о том что видос длится 2 часа: 🗿
"Backpropagation - дебри нейросетей."
Понял.
Благодарю! Повторил - работает! правда описочек по коду.... :-)
Огромное спасибо, у Вас обалденные уроки, так доспупно еще никто не обяснял- как дважды два. Теперь осталась только практика и время на неё. Вы супер❤!!! 🦾🦾🦾👍
Благодарю!!!
Когда дрифт ))))))))
Очень жду
невероятно, так это то что мне нужно, ну почти...
мне бы распознавание лиц или голоса, но это тоже пригодится, спасибо!
Для распознания лиц я использую в основном OpenCv
@@davvik_ спасибо, возьму на заметку!
Когда в Ютюб стикеры добавили? Вкюб какой-то
@@davvik_так то эту задачу можно решить используя тот же tensorflow илм pytorch, но с opencv наверное попроще будет, ведь эта библиотека (если я не ошибаюсь, ещё не изучал её) направлена на работу с компьютерным зрением, отсюда и название - opencv (open computer vision)
После изучения elasticsearch и фонетической токинизации я думал что способен понять все...
Спасибо что спустил на землю
This is годно!
Хауди: нейросети, это легче, чем кажется
Я, который ничего не понял: океееееей😂
Класс)
спасибо большое, великолепно!
Привет Харди, можешь ли ты создать собственную гугл камеру которая будет снимать программные ограничения с камеры телефона?, например есть поко ф5 и ф5 про, у них одна и тоже камера и почти один процессор, но про снимает 4к 60 фпс а просто ф5 снимает 4к 30 фпс из-за программного ограничения
Харди Бэк?
вхахвахахахахаххаха че за кринж
4:35 для таких задач и делают квантовые компьютеры. Это буквально одна из самых простых функций квантового компьютера.
Можете дать ссылку на видео или расскажите мне как хауди настроил свой саблайм текст
Сделай видео где ты будешь создавать нейросеть которая будет общаться с пользователём
Конца крутая!
Это единственное видео, где НОРМАЛЬНО объясняют, как писать нейросеть
Класс осталась сделать нпс с нейро в место сценарий поведения будет круто вот только как простимулировать её понимать что хорошо что плохо
на примере нынешних нейронок, возможно ли обучение нейронки по предсказанию курса валют или акций? Интересно, насколько точными были бы такие предсказания нейронкой. Камнями не закидывайте, просто вопрос из любопытства. (или уже все так делают?)
Уже давно делают, правда чаще обходятся бустингами какими-нибудь, но и нейронки тоже можно
@@mrgeodezik2122 О, прикольно, трейдеры получается ещё до шумихи про нейронки делали подобное)
Нет, потому что слишком много нужно учитывать данных
@@rucat284 Ну это же nonsense. Много данных - ну и отлично, много признаков - можно отобрать поменьше.
При этом нормальные модели получаются, на kaggle куча соревнований от банков на прогнозирование временных рядов. И качество топовых решений там впечатляет.
Чисто по графику не получится прогнозировать, потому что на курс валюты влияет ситуация в мире. Закономерности, конечно, есть, но проще какой-нибудь дефолтный алгоритм написать, чем нейросеть городить.
1:31 я думаю, это первая буква из слова "Задача" 🤣
Спасибо за видео. А как научить общаться? Ну или выдавать нужную инфу по "скормленным" данным? Кучу роликов пересмотрел и что-то вроде понятно, но не простым языком там сказано, у тебя попроще объяснения, хотя смотрю и слушаю тебя на скорость 1.75, уж больно медленно излагаешь для меня))
Красавчик
Чува ты не чего не объясняешь, просто говоришь просто объявляем это, если вам что-то не понятно купите курс по программированию. Ты как учебник информатики не чего не объясняешь, я только понял что нейроны пропускаю через себе информацию, и то я это вспомнил из видео как работают нейросети где чел объяснял 1 час 20 минут. Ты даже понятным простым языком не объяснил что такое матрицы, нет сказать что матрицы они по каждому пикселю собирают изображение в виде 00, 01. np.random.uniform(-0.5, 0.5, (20,784)) вот что это? ты просто что веса это : чтобы нейросеть лучше справлялась с задачей, ты даже пример не показал, ты не объяснил понятным кратким языком что это, ты просто сказал что это просто надо, это как рассказывать куча воды которой не понадобиться под предлогом что это понадобится, и спустя час воды в уши говоришь съёмным видо, для чего это надо, почему не рассказать всё понятным языком? Почему ты не мог понятно объяснять код? Ты даже не объяснил значения переменных, мне кажется ты даже сам не чего не понимал поэтому читал статью, и переписовал код с сайта. Если не разбираешься, то зачем учить не правильной логикой других людей?
А ты чё хотел за 18 мин?
Сейчас я вам за 3 минуты объясню, как делать операцию на мозге
Тут важен контекст. Если понимать, что 'с нуля' это значит человек незнаком даже с мат аппаратом, то такого обьяснения недостаточно. А если знаешь матаппарат и Пайтон, но совсем не знаешь как делать сеть на пайтоне, то норм. То есть с нуля, означало без использования более высокоуровневых пакетов, чисто на пайтоне. Он так вначале и пояснил.
Кринж чел. Это развлекательный контент, а не обучающий. Если хочешь чему-то научиться, то лучше уж посмотреть каналы с лекциями по то или иной теме и почитать учебники. На развлекательных видео ты ничему не научишься, если у тебя уже нет опыта. Развлекательные видео сделаны, что заинтересовать человека в той или иной сфере, в дальше если человеку понравилось то он пойдёт изучать матчасть. Крч жаловаться на малую информативность в развлекательном видео - кринж, как я и сказал вначале
Это просто для общей информации, обучения тут нету))
в какой програме ты роботаеш?
Это что, я стану умным?
Да
Возможно
Зависит от человека
Нет
@@alexandrunknown1456жаль
Короче это оч полезно даже для человека который не занимается програмированием
Полезно чем ?…
Тут сухая тех информация без подробных объяснений даже самого концепта
Как сказал сам автор: «Нейросеть будет не учиться, а запоминать»
@@nikozdevдля общего понимания
Ну это каждый ребенок может нагуглить и разобраться. Давай что-то посложнее, например, реализацию свертки в виде матричного умножения и ручками бэквард реализовать для этого слоя. Все на нампи офк)
Не каждый
Што 6лять?
Доброго дня, автор подскажите пожалуйста а почему инициализация весов начинается в диапазоне -0,5 0,5 почему именно это. Интервал? Не 0 и 1 не -1 и 0, прошу объяснить спасибо
Лайк и всё
🔥🔥🔥
3:28 Выхлоп нейросети?? Кто-то перелюил субару
Уже гораздо лучше, чем было. Только не стоит сразу переходить к коду, сначала объясните, как работает нейросеть в плане теории для понимания, чтобы любой мог создать свою нейросеть
было бы супер, но на создание учебного материала уходит много времени походу.
@@psevdonim0_o Да, но думаю, тем, кто готовит материал, просто нужно исправлять моменты, которые не понятны или не очень, постепенно повышая свой уровень в подаче информации, тем самым обеспечивая гораздо лучший результат)
Тебе объяснили в самом начале, как она работает.
@@rucat284 круто, с тех пару слов, я теперь понимаю как написать нейронку. Люди книги посвящают . Ага , держи в курсе.
Очень интересно, но как бы не старался ничего не понял😄
Как называется музыка в динозаврике ?
Привет, мир!
4:39 Вау! Это Latex в анимации Python Manim?
Изменено: Ответьте пожалуйста
Да, прикольная штука
@@HowdyhoNet то есть ты умеешь пользоваться библиотекой ManimCE?
Хауди, профи🦾💖💖💖 максимально!!!
Боже 4-5 лет назад смотрел твои видео и смотрел твоë видео делаю динозаврик 3д🥲
Кто-нибудь сталкивался с такой ошибкой?
ValueError: maximum supported dimension for an ndarray is 32, found 56
Мне нужно разработать приложение с ИИ, которое будет давать советы по окружщей среде с камеры смартфона. С чего начать обучение программированию? Какие языки и ИИ выбрать для этой задачи?
Бро, спасибо за твою работу только новичку не понятно не слова. Это для тех кто в теме, а можеш сделать самую простую нейронку чтобы было понятно новичку? где каждая строчка кода была бы обьяснена? заранее спасибо
Круто, но очевидно было бы полезнее не с цифрами, цифрами занимаются в универе, было бы интереснее кубики или какие-то определенные фотки
Ничиво не понял но очень интересно
Хотелось бы увидеть это все на пайторче или тензорфлоу
🤡
Фантастика! Второй год изучаю Python и только сейчас начинаю понимать его мощь и возможности. Спасибо, автор. Я подписался
будешь выпускать урок по расту ???
Возможно, в будущем
Боже, какие уроки по расту, он сам ничего толком не умеет, призываю найти адекватный канал, чтобы адекватно выучить rust, но лучше всё равно просто открыть элементарную документациб
Как же жалко, что этого не было в школе 30 лет назад, когда я хорошо знал математику...
Когда 3 часть Geometry Dash в 3D?
Хауди, сделай видео "Учим Godot 4 за час" или плейлист по Godot 4.1! Этот движок сейчас быстро развивается и классно бы было посмотреть в твоей подаче и русской озвучке, а также язык GDscript очень похож на python!🙂
Можно гайд на тенсорфлоулайт для юнити?
Почему нейрон смещения инициализируется нулями? bias_input_to_hidden = np.zeros((20, 1)) разве не единицами правилно: bias_input_to_hidden = np.ones((20, 1))
так у тебя функция сместится сразу, в чем смысл. Ты же его у в уравнении потом используешь.
@@fiftyfive5857 Да уже допер, это не сам нейрон смещения а его вес, единица опускается потому что на нее бесмысленно умножать веса, веса и получатся, просто по видео сразу не понятно.
В случае со смещениями это не так важно, градиентный спуск сам разберётся куда идти, хоть двойками заполнить можно.
А вот сами веса никогда ни в коем случае нулями нельзя инициализировать, только рандомные числа (а ещё лучше учитывать используемые активации и юзать, к примеру, инициализацию Ксавье)
ЗАМЕТЬ!можно твои отрывки из видео заливать в тик ток.Автора и видео буду писать в описании.Спасибо за видио
Ответь пж...
Хайди выпусти видео про нейросеть и все по порядку и что да и как работает на 1 час
Посмотрет, ничего не понял, вышел. Но так кто видео может кому-то быть полезным
Сделай ролик про браузеры
Ребят, кто шарит в нейросетях, обьясните, вот сеть научилась чему-то, где хранятся ее "навыки" и много ли они весят?
Её навыки это веса(тупо цифры, в основном, от -1 до 1), а также смещение(тоже просто цифры)
хранят в файле
Вообще в качестве обучения, ты использовал метод градиентного спуска , в который входит так же обратное распространение ошибки
Омг, я думал я хорош в пайтоне, а тут целый темный лес для меня 😢
а как можно несколько обектов на одном изоображении находить?
Добавить слои
Есть алгоритм YOLO для этого. Идейно, это кодирование изображения с помощью CNN + построение рамок объектов + классификация рамок.
С помощью такой простой сети как в видосе я бы детекцией заниматься не стал.
@@mrgeodezik2122 а не знаешь почему нейронка перестала запускаться import torch
model = torch.hub.load('ultralytics/yolov5', 'custom', path='best.pt', device='cpu', force_reload=True)
и выдаёт ошибку Traceback (most recent call last):
File "/home/lokomanako/Desktop/.dgfdg/test server/server.py", line 8, in
model = torch.hub.load('ultralytics/yolov5', 'custom', path='best.pt', device='cpu', force_reload=True).autoshape()
File "/home/lokomanako/.local/lib/python3.10/site-packages/torch/hub.py", line 540, in load
model = _load_local(repo_or_dir, model, args, **kwargs)
File "/home/lokomanako/.local/lib/python3.10/site-packages/torch/hub.py", line 569, in _load_local
model = entry(args, **kwargs)
File "/home/lokomanako/.cache/torch/hub/ultralytics_yolov5_master/hubconf.py", line 83, in custom
return _create(path, autoshape=autoshape, verbose=_verbose, device=device)
File "/home/lokomanako/.cache/torch/hub/ultralytics_yolov5_master/hubconf.py", line 33, in _create
from models.common import AutoShape, DetectMultiBackend
File "/home/lokomanako/.cache/torch/hub/ultralytics_yolov5_master/models/common.py", line 28, in
from utils.dataloaders import exif_transpose, letterbox
File "/home/lokomanako/.cache/torch/hub/ultralytics_yolov5_master/utils/dataloaders.py", line 31, in
from utils.augmentations import (Albumentations, augment_hsv, classify_albumentations, classify_transforms, copy_paste,
File "/home/lokomanako/.cache/torch/hub/ultralytics_yolov5_master/utils/augmentations.py", line 15, in
from utils.general import LOGGER, check_version, colorstr, resample_segments, segment2box, xywhn2xyxy
File "/home/lokomanako/.cache/torch/hub/ultralytics_yolov5_master/utils/general.py", line 38, in
from ultralytics.utils.checks import check_requirements
ModuleNotFoundError: No module named 'ultralytics.utils'
дня два назад всё работало
что-то я картинку свою сделал, нейросети скормил, а сетка её не распознаёт.
Говорит что моя 4 на самом деле 3. А если одну эпоху накинуть, то вообще 7.
не работает. Ошибка в функции - y_train
(SyntaxError: invalid syntax)
y_train = f['y_train']
^