Відео

ну и нах*** он такой нужен этот кликхаус? неужели более адекватных альтернатив нет?

Честность нужна только внутри команды и то не всегда. Какие-то очень сферические рассуждения получились на 15:50

очень толковый доклад, благодарю

Единственный нормальный доклад без воды на русском, мое уважение

вместо различных историй хотелось больше услышать про механизм, вместо этого по механизму быстро пробежались без углубления в детали, чтож пошел гуглить

Послушал Начало. Да. Бубки и ВК естьь Софт все равно амно

Хороший доклад. Описывает типовую связку dbt с airflow, но все это печально. Скоро выйдет какой-нибудь open source и все инженеры будут запросики писать

Было бы крайне интересно послушать про нынешнюю ситуацию с DWH. Как сложилась все таки ситуация с Exasol, ведь, наверняка, компания Exasol в РФ не предоставляет свои продукты.

Спасибо большое) Было очень интересно

Классный доклад!

Trino, Drill, Impala, StarRocks, SparkSQL а теперь еще и DQ :) Осталось еще cost based optimizer докрутить

Analysis[əˈnælɪsɪs]=Анализ это детальное Изучение Составляющих или Строения чего-либо.

Analytical[ænəˈlɪtɪkəl]=Аналитический означает относящийся к анализу или логическому мышлению или использующий их.

Слишком много аааааа

Прекрасный лектор и учёный Всегда приятно слушать Спасибо огромное советскому поколению и образованию

batch [bæʧ] - пачка, пакет; последовательность, серия; партия

duplication [djuːplɪˈkeɪʃn] - удвоение, удваивание; копирование; воспрои ведение; размножение; повторение; тиражирование.

replicate [ˈreplɪkɪt] - копировать, повторять; воспроизводить, размножать; тиражировать, дублировать.

replicated [ˈreplɪkeɪtɪd] - скопированный, воспроизводимый

Подонок. Благ его лишили. Войну в Европе развязали. Войну, мерзавец, развязало в, Европе НАТО, в 1999 году.

Слишком много аааааа

Это туалетная тряпка , а не ученый . Просто рвань позорная. Пацаны с сво покажут тебе твоё иесто

Допустим я быстро обработал данные. Но ведь станок все равно деталь будет пилить 9 часов

Шмурдин - или нйух

Этот человек делает науку платной! Пуполерезатор)

Хороший контент, но Марк слишком быстро тараторит)

Отличный доклад, спасибо)

Уффф, офигенно вышло Ты лучший, без шууток Я тҽбҽ 𝓬дҽлαю ρҽƙ1лαᙏყ Ԩα 𝓬ßσҽᙏ 𝓬тρиᙏҽ бҽ𝓬плαтԨσ, Ԋαбҽρҽ1ᙏ тҽбҽ пσдпи𝓬чиƙσß! 3αйди Ԋα этσт ƙαԨαл ყßидиɯƄ ᙏσи дßα ƙαԨαлα - пσдпиɯи𝓬Ƅ Ԩα Ԋиχ! А я тебе пожелаю удачи! :)

18 минут из 30 не про маге

Отличный доклад!

Такое ощущение, что на Flink написали NiFi)

Является ли CDC/Debezium альтернативным решением в случае с небольшим количеством сообщений и несложными трансформациями?

Жаль, что цель доклада - реклама форка, который уже заброшен 😢

И ещё какая тварь UA-cam замедляет, руки бы обломать...

Отличный доклад

Спасибо Владимиру за отличный рассказ

бэ, мэ, ненужный выпендреж и шуточки, по существу не много

есть русское слово - применить, зачем долгое имплементировать ? )))))

очень много воды

Много не по теме. А так очень интересно Спасибо

Да блин, запускаю тот же самый код и работает иначе всё

Понравилась первая часть выступления, которая не относилась к Mage, вот эта рефлексия с позиции менеджера. Как только перешли к демо по непосредственной теме, все стало очень скомканно, что-то в streamlit показал, запустил пайплайн в mage, что получил, для чего - непонятно. Может быть, стоило строить доклад не вокруг конкретного тула, а до конца описать преобразования, которые с командой удалось осуществить. От себя скажу про Mage. Он расширяет возможности оркестратора, позволяя смотреть на результаты трансформаций в jupyter-like интерфейсе и даже передавать датасеты между тасками. Также он ест меньше памяти в сравнении с Airflow, особенно в idle state. Но! В прод мы так и не решились с ним идти - он все-таки еще очень сырой, какие-то нечитаемые ошибки, баги и т.п.

ЭЭ а как же запрет работы из-за границы ?

Интересно, ожидал, что на Data Lens перейдут

Добрый день. А мне, как кандидату, не понравилось интервью. Создалось впечатление, что нанимающие менеджеры живут в своей придуманной ими реальности. Что нужно сделать чтобы % был больше: перестать искать сферического коня в вакууме, идеала(с нереальными скилами), а опираться на реальных людей, которые приходят на рынок. И речь идет не о том, что нужно брать не грамотных, а о том, чтобы опираться на опыт людей+потребности компании. Если нанимающий менеджер даже резюме не читает - по мне это говорит о том, что он не заинтересован в человеке, а хочет найти функцию. Позиция соискателя: 1. Все знать невозможно, по причине огромного количества информации и технологий, тем более, что они устаревают. 2. за свою карьеру я работал в разных компаниях, и удивительно: то, что меня спрашивали на собесах по технологиям, в реальных проектах было не более 20% 3. считаю, что умение осваивать и учиться новому гораздо более важно, чем знания на текущий момент, однако не все компании это понимают. 4. лайф-кодинг по python на собесах для DE считаю бесполезной штукой, поскольку сейчас очень много информации по python, для написания дагов airflow не нужно сверхзнаний, а если пишешь на nifi, там вообще nocode. Гораздо важнее понимание процессов, как работает та или иная технология, принципы проектирования БД, обработка данных, знание нюансов конкретной СУБД, в которой работаешь. У меня в опыте по DE и даже когда я был разработчиком, ни разу не было задач по алгоритмам. Разве что в институте. Зачем это спрашивают - я не понимаю. 5. Софт-скиллы важны, это да. Однако когда нанимающий менеджер даже резюме не читает, это занавес. Мне скажут, что он очень занят, это отговорки, поскольку если нанимают по месяцам(то на это время, конечно же есть). Найм - это обоюдный процесс. 6. Мне очень понравилась идея спрашивать человека об его опыте. Это честно и вызывает уважение. И по сути верно. О чужом опыте гораздо труднее разговаривать. А про знания - я написал выше. Вывод: маленький % по найму на мой взгляд из-за того, что компании хотят найти идеального под себя кандидата. Идеалы недостижимы, они есть, но только в наших головах, а реальность другая.

Здравствуйте, а видео из дискуссионной зоны пишется?

А embedded остается такой же? У суперсет насколько я понимаю embeded достаточно ограничен

Уже вторая половина 2024, где open source))

Суперсет - огонь!