Разбор реальной data science задачи

Поділитися
Вставка
  • Опубліковано 22 тра 2024
  • 🔥 Telegram t.me/ershov_diary
    🔥 Индивидуальная программа по обучению data science под вашу цель с моей менторской поддержкой до результата:
    ershov.io/dsprogram?...
    Тут я рассказываю почему я создал эту программу, для кого она подходит и в чем ее преимущества:
    • Video
    🔥 Мой telegram канал о data science: t.me/ershovds
    В этом видео я разберу пример реальной data science задачи:
    * Определение продуктовой задачи - удаление негативных комментариев
    * Постановка задачи машинного обучения - бинарный классификатор и precision / recall метрики
    * Поиска датасета (берем с Kaggle)
    * EDA (с помощью pandas)
    * Предобработка текста (с помощью nltk и scikit-learn)
    * Тренировка моделей (с помощью scikit-learn)
    * Что делать дальше (про деплой в production)
    Ссылка на jupyter notebook с примером из видео:
    gist.github.com/ershovio/df72...
    Таймкоды:
    0:00 Введение
    1:00 Постановка задачи
    3:07 Составление датасета
    5:55 Анализ данных (EDA)
    12:48 Предобработка текста (text preprocessing)
    20:40 Тренировка моделей (Model training)
    Контакты:
    Instagram: / ershovio
    Twitter: / ershovio
    Facebook: / ershovio
    #ershovds

КОМЕНТАРІ • 544

  • @Max-wn2gd
    @Max-wn2gd 3 роки тому +519

    ИМХО. Вот именно подобного формата роликов не хватает. Чтобы лучше понять, в чем заключается работа того или иного специалиста в той или иной области, необходимо посмотреть на процесс изнутри с множества сторон. Это чрезвычайно помогает примерить профессию на себя и понять: а чтоит ли пробовать в неё войти или нет.
    п.с.: спасибо

    • @LukeryaPereprygova
      @LukeryaPereprygova 3 роки тому +3

      истина

    • @Petrovich003
      @Petrovich003 Рік тому

      всё верно, но я так понял задачи могут немного отличаться, смотрю для чего то и банкам нужны специалисты подобного рода, а может "зеленый" просто учит в своей школе и не более...

    • @user-gb1lj5tl8e
      @user-gb1lj5tl8e Рік тому

      абсолютно согласен. я наконец понял, что мне это не интересно, но именно изза технической части - гораздо интересней как модель работает? как её создать?

    • @ShooterStar
      @ShooterStar Рік тому

      еще не хватает видеороликов, в которых обьяснят по модулям, как и куда применять и т.д... даже в вузе нгихера не обьясняют

    • @user-ki2uh3vo3t
      @user-ki2uh3vo3t 11 місяців тому

      Вы больше не нашли подобных роликов?

  • @oxrets
    @oxrets 3 роки тому +278

    +1 чтобы выходило видео подобного формата

  • @user-bf5hy5ov9h
    @user-bf5hy5ov9h 2 роки тому +232

    Сделай из этого рубрику "разбор реальных задач"

    • @user-ut3mb6bs9u
      @user-ut3mb6bs9u 2 роки тому +1

      ++++

    • @Olejo111
      @Olejo111 2 роки тому

      +++

    • @user-es9mc2xe5v
      @user-es9mc2xe5v 2 роки тому

      Да

    • @tuzemec410
      @tuzemec410 Рік тому +1

      А лучше "разбор нереальных задач"!

    • @user-jv7ke8fr4g
      @user-jv7ke8fr4g Рік тому +1

      разбор реальных задач это супер, а не эти ваши бла-бла-бла, программирование, дата сайнс, бла-бла.

  • @user-cu9mu2mu5y
    @user-cu9mu2mu5y 2 роки тому +47

    Нужная вещь, намного лучше чем просто разговорные ролики, в которых говорят не о чем. По больше бы таких роликов как этот!)

    • @user-ki2uh3vo3t
      @user-ki2uh3vo3t 11 місяців тому

      Вы больше не нашли подобных роликов?

  • @lerkadverka
    @lerkadverka 2 роки тому +6

    Не часто вообще пишу комментарии, но ваше видео стало для меня новым толчком в изучении Data Science. Спасибо вам за контент! Буду ждать больше подобных роликов.

  • @mimocreations9681
    @mimocreations9681 Рік тому +15

    Автору респект! Спасибо тебе мужик. Столько годноты и вообще без понтов и пафоса - чётко, с доступными объяснениями. То что надо👍

  • @viktoriiauntilova7695
    @viktoriiauntilova7695 2 роки тому +5

    Александр, спасибо огромное за такие видео ! Бомба!

  • @matveiandrienko1266
    @matveiandrienko1266 2 роки тому +13

    Я могу сказать тебе что ты большой молодец! Я очень поражен на сколько информативный ролик. Желаю тебе побольше подписчиков и просмотров, а людям которые тебя смотрят больше подобных видосов на ютубе в целом, ибо в реальности не хватает такого рода видео.
    Так держать! Респект!

  • @maxbeliy5610
    @maxbeliy5610 Рік тому +2

    Искал видео именно такого формата, подписался, очень жду таких видео от тебя. Ведь действительно, что бы понять понравится ли тебе такая работа, надо увидеть её на практике. Большое Спасибо)

  • @bellamina
    @bellamina 2 роки тому +4

    Комментарий в поддержку канала и подобных видео)) я только в начале пути и очень полезно смотреть и формировать более чёткое представление о том, чем занимаются специалисты DS))

  • @user-ff1sd6wl1h
    @user-ff1sd6wl1h 3 роки тому +61

    Вот это контент! Шикарный видос, побольше бы таких

  • @rizottoaria
    @rizottoaria 2 роки тому +2

    Такие разборы очень полезны! Определенно нужно больше таких видео

  • @simonskurikhin8341
    @simonskurikhin8341 3 роки тому +5

    Спасибо, это очень круто! с радостью посмотрю еще подобные видео с реальными задачами )

  • @egoryumaev6115
    @egoryumaev6115 Рік тому

    Простое, наглядное и доходчивое объяснение, смотрится на одном дыхании! Большое спасибо за интересный и качественно проработанный видеоурок! Очень не хватает видео именно такого формата!

  • @user-uh6er7gx4w
    @user-uh6er7gx4w 2 роки тому +2

    Спасибо. Очень круто, что можно увидеть пошаговый гайд на примере реальной задачи.

  • @user-kn8iu5ce3w
    @user-kn8iu5ce3w 2 роки тому

    Александр, спасибо за вашу работу! Крайне интересный тип видео!

  • @AiratGalimov
    @AiratGalimov 2 роки тому +3

    Такие видео отлично дополняют теорию и показывают, что конкретно надо использовать для решения реальных задач

  • @katerinazvereva521
    @katerinazvereva521 2 роки тому +9

    +1 чтобы выходили еще видео с таким разбором реальных задач. Например, по распознаванию изображений ))

  • @mishkafilosov
    @mishkafilosov 2 роки тому +1

    Только вперед и не останавливаться. Спасибо очень интересно

  • @NavAlextv
    @NavAlextv 3 роки тому

    Дружище, продолжай! Давно искал подобное видео.

  • @Teko_Tekor
    @Teko_Tekor Рік тому

    Доступно и внятно! Так держать! Очень понравились стиль и объяснения!

  • @kors444
    @kors444 Рік тому +1

    Отличная идея с разбором задачи и обьяснением решения. Спасибо!

  • @nikita_5578
    @nikita_5578 2 роки тому +1

    Спасибо! Очень полезно, надеюсь будет продолжение)

  • @alexanderkraus3038
    @alexanderkraus3038 2 роки тому

    Спасибо за большой труд , жаждут узнать больше

  • @user-de6vu5gb2n
    @user-de6vu5gb2n 3 роки тому +2

    Спасибо за проделанную работу!

  • @nadyamoscow2461
    @nadyamoscow2461 2 роки тому +1

    Большое спасибо за видео. Я как раз искала разбор реальной задачи, чтобы понять, в чем, собственно, заключается работа специалиста в datascience. Отличная подача материала. Спасибо

  • @toryk95
    @toryk95 Рік тому +3

    Очень не хватает в сети подобных туториалов! Спасибо Вам огромное за Ваш труд! Понимаю, как сложно такое записывать. Обязательно, по возможности, записывайте ещё

    • @user-ki2uh3vo3t
      @user-ki2uh3vo3t 11 місяців тому

      Вы больше не нашли подобных роликов?

  • @rosemary8281
    @rosemary8281 Рік тому

    Познавательно, надеюсь видео с разборами будут выходить чаще)

  • @foryoutubeandothers
    @foryoutubeandothers 2 роки тому +1

    Спасибо огромное, супер-формат!!!

  • @ohpalevo7484
    @ohpalevo7484 3 роки тому

    спасибо, надеюсь подобного формата будет больше

  • @olegyes934
    @olegyes934 2 роки тому +1

    Спасибо за Ваш труд! Первый раз смотрел решение задачи Data Science - очень понравилось.

  • @user-ww9je8cc2j
    @user-ww9je8cc2j 3 роки тому +2

    Очень интересно! Успехов!

  • @rn2767
    @rn2767 Рік тому

    Очень интересно! Спасибо Вам за труд!

  • @user-uc8xk7ri5b
    @user-uc8xk7ri5b Місяць тому

    Отличный ролик, спасибо!

  • @olegzaza
    @olegzaza 2 роки тому

    Отличный ролик. Прям искал что-то такое. Особенно классно, что ошибаешься и не режешь ошибки на видео. Сразу узнаю свой код)

  • @user-ze1jo3ln5k
    @user-ze1jo3ln5k 2 роки тому

    Александр, спасибо! Очень полезно для понимания. Задача очень похожа на то, что мы с командой решаем в работе.

  • @Eplit83
    @Eplit83 2 роки тому +3

    Туториалы нужны, сейчас прохожу обучение на аналитика данных, твои уроки очень полезны студентам!

  • @andrewbelikov8772
    @andrewbelikov8772 Рік тому +1

    реальные разборы редкость в инете, все воду льют. Молодец!

  • @tomirisserikova4642
    @tomirisserikova4642 9 місяців тому

    Очень полезный туториал, спасибо большое, побольше бы таких видео👍🏼

  • @user-xn4yl7zk6g
    @user-xn4yl7zk6g 3 роки тому

    Круто! Спасибо! Ждем еще видео

  • @liliyaakhunyanova9785
    @liliyaakhunyanova9785 3 роки тому

    Спасибо! Только начинаю обучение, в этом видео все последовательно объяснено. Многое стало понятнее!

  • @Lubov6135
    @Lubov6135 Рік тому +1

    Супер. Спасибо большое. Для меня как новичка, все понятно, отличное видео.

  • @gachibasskolbasit7641
    @gachibasskolbasit7641 3 роки тому +58

    На самом деле очень круто! Нечасто можно найти видео, в котором последовательно и понятно показан алгоритм действий. Мне кажется, это поможет тем, кто только начинает свой путь в DS. Например, делая свой пет проект, можно отталкиваться от роликов такого типа. Спасибо и продолжай!)

    • @user-ki2uh3vo3t
      @user-ki2uh3vo3t 11 місяців тому

      Вы больше не нашли подобных роликов?

  • @bilenjka1
    @bilenjka1 2 роки тому +4

    Спасибо за полезное видео. Хотелось бы больше туториалов по использованию технологий, которые сейчас чаще всего используются в продакшене;)

  • @shin_kranel
    @shin_kranel 11 місяців тому

    Было очень полезно посмотреть, спасибо за твои старания

  • @fenuga
    @fenuga 3 роки тому

    Спасибо за отличный туториал ,побольше бы таких и в описании если можно ресурсы почитать про современные алгоритмы мл и все для новичков

  • @andreyk59
    @andreyk59 2 роки тому

    Спасибо за видео. Очень полезная информация!!!!

  • @newwekIT
    @newwekIT 3 роки тому

    Только что подписался, благодаря этому видео. Хотелось бы увидеть больше подобных видео.
    Лично бы мне зашла тема по prediction.
    Ещё раз спасибо за полезное видео.

  • @yelamankarassay
    @yelamankarassay 3 роки тому

    Делай дальше, топчик смотреть такое только удовольствие!!

  • @user-yc4ik4nx1n
    @user-yc4ik4nx1n Рік тому +1

    Спасибо! Очень полезная тема! Рубрика с практическими кейсами такого рода была бы очень ценна!

  • @user-uj4wn8jb6c
    @user-uj4wn8jb6c 2 роки тому

    Топовое видео! Даёшь больше туторов! 👍🔥

  • @user-ck5oj5rf7d
    @user-ck5oj5rf7d 3 роки тому

    Это то, что я искал ! Большое спасибо!

  • @pavel__p
    @pavel__p 3 роки тому

    Большое спасибо! Очень полезное видео!

  • @user-cw7jb2dx3d
    @user-cw7jb2dx3d 3 роки тому

    Спасибо за работу. Все очень понятно.

  • @ivandenisov3477
    @ivandenisov3477 10 місяців тому +1

    Нужная тема. Так гораздо проще понять с каким задачами и подходами надо будет работать. Спасибо за видео.

  • @matveevsergey1986
    @matveevsergey1986 Місяць тому +1

    Лучшее видео про реальный проект по дата саенс. Александр, спасибо!

  • @vladimirsavenkov5777
    @vladimirsavenkov5777 2 роки тому

    Спасибо за видео! Было интересно посмотреть!

  • @pluspix3788
    @pluspix3788 2 роки тому

    Спасибо за видео! Очень доступно.

  • @nikita13131
    @nikita13131 7 місяців тому

    Огонь, спасибо большое!

  • @elenalevasheva3830
    @elenalevasheva3830 10 місяців тому

    Спасибо за ценное видео. Полезно и интересно. С удовольствием посмотрела.

  • @hinomuratomisaburo4901
    @hinomuratomisaburo4901 3 роки тому +1

    Классное видео больше бы таких в ютуба... все доходчиво простым языком

  • @grigorytrofimov6513
    @grigorytrofimov6513 2 роки тому

    хороший пример, реальная задача. буду рад еще таким видео!
    спасибо!

  • @uknow2908
    @uknow2908 2 роки тому

    Спасибо за видос. Было интересно!

  • @user-xm1vo2ro8n
    @user-xm1vo2ro8n 3 роки тому

    Супер. Рад, что попал на ваш канал

  • @user-sg4kc5cx5v
    @user-sg4kc5cx5v 10 місяців тому

    Здорово! Спасибо огромное!

  • @StepStep-ls2cz
    @StepStep-ls2cz Рік тому

    Спасибо за ролик. Я активно ищу реальные задачи с решением и разбором. И вот оно!)

  • @user-dm7dd6rv9h
    @user-dm7dd6rv9h 2 роки тому +1

    +1 для нового контента. Очень интересная инфа - Продолжай в том-же духе !!!

  • @user-xq9ui9uo8v
    @user-xq9ui9uo8v 3 роки тому

    Вот это видео прямо супер! Информативность 10/10.

  • @deniskolevatov4555
    @deniskolevatov4555 3 роки тому

    Спасибо! Отличное видео!

  • @alextotun
    @alextotun 3 роки тому

    Отлично! Все ясно понятно. Спасибо!

  • @xmadlen
    @xmadlen Рік тому +1

    Спасибо за видео, оч долго искала что же такое анализ данных, как это выглядит, что вообще делает аналитик и как, вручную ли анализирует, какие программы использует, какова задача и цель анализа и тд... как вообще выглядит сама работа. чаще всего рассказывают о плюсах и минусах профессии, так и не объяснив что именно и как надо делать)) спасибо!

  • @hinomuratomisaburo4901
    @hinomuratomisaburo4901 3 роки тому

    офигенно !!! респектую Вам

  • @BurmeseBlueRose
    @BurmeseBlueRose 2 роки тому

    Спасибо! Очень интересное видео!

  • @user-jd6uz5si2f
    @user-jd6uz5si2f Рік тому

    Спасибо за работу!!!

  • @irinalife8298
    @irinalife8298 Рік тому

    спасибо! очень полезное видео

  • @tommyr4783
    @tommyr4783 3 роки тому

    Круто, спасибо за контент 👍

  • @evgenypenin1217
    @evgenypenin1217 5 місяців тому

    Спасибо за видео!

  • @user-kt4sp5il7i
    @user-kt4sp5il7i 3 місяці тому

    Отличное видео, автору большое спасибо.
    Теперь хоть стало понятно как работать с гиперпараметрами и улучшать модель.
    Не хватило этапа EDA, если правильно понимаю, это самый важный этап по работе с данными.

  • @rosttaran2217
    @rosttaran2217 2 роки тому

    Очень крутое видео, большое спасибо Вам за труд.

  • @TheKorabkoff
    @TheKorabkoff Рік тому +1

    спасибо! то чего не хватает на лекциях и курсах

  • @user-gj4wi4ez3s
    @user-gj4wi4ez3s 10 місяців тому

    Полезное видео, помогло, спасибо!

  • @maksim0933
    @maksim0933 2 роки тому

    Классное видео, спасибо автору!

  • @user-eh1nj8el9l
    @user-eh1nj8el9l 2 роки тому

    Спасибо огромное! Разжевал материал)

  • @user-yb2zj6bf1v
    @user-yb2zj6bf1v 10 місяців тому

    Крутое видео, побольше бы таких

  • @catherinesh.5759
    @catherinesh.5759 Рік тому

    Спасибо, очень интересно и наглядно)

  • @maxsen7772
    @maxsen7772 Рік тому

    Очень полезное видео, хорошо разбавляет сухую теорию. Реанимировал свой интерес к DS

  • @AZ993k
    @AZ993k Рік тому

    Спасибо, очень интересно!

  • @jaromantuka
    @jaromantuka 2 роки тому

    Очень очень очень полезный ролик, спасибо!

  • @elena.world3721
    @elena.world3721 3 роки тому

    Пожалуйста, продолжайте выпускать такие видео

  • @user-ut3mb6bs9u
    @user-ut3mb6bs9u 2 роки тому

    Спасибо, очень круто!

  • @dreamer6228751
    @dreamer6228751 Рік тому

    Отличный материал, спасибо. Можно продолжение с разборками задаст на новых либах)).

  • @juliafilateva1327
    @juliafilateva1327 2 роки тому +3

    Потрясное видео, на постоянку такие были бы очень полезны!

  • @sanpavlovich9726
    @sanpavlovich9726 2 роки тому

    Спасибо, очень полезное видео!

  • @Yarosldmitr
    @Yarosldmitr 2 роки тому

    Долго ждал такой формат

  • @vesna5821
    @vesna5821 Рік тому

    Наконец-то хоть немного понятно, что это за профессия. Спасибо Вам!

  • @OlgaGalanina
    @OlgaGalanina Рік тому

    Спасибо огромное!

  • @user-hd8oy9xp8m
    @user-hd8oy9xp8m 2 роки тому

    Спасибо за туториал, продолжайте в том же духе

  • @depressivepumpkin7312
    @depressivepumpkin7312 2 роки тому

    интересно интересно, я вот вообще не знал про ваш канал, спасибо!

  • @rrahll
    @rrahll 2 роки тому

    Подписался, спасибо. Было интересно!

  • @user-iv7wb8iv9b
    @user-iv7wb8iv9b 3 роки тому +24

    Давайте теперь эту же задачу на более продвинутых моделях и сравним результаты