Последние посты
Дата-инженерские заметки
10 сент., 07:25изменён
Еще мне смешно, что Олег Тинькофф комментит КАЖДЫЙ пост о себе или банке.Под постом того парня писал ‘мы нанимали It специалиста, а не блогера’ коммент на скринеКаждое утро PR Plata начинается с сердечного приступа
Дата-инженерские заметки
10 сент., 07:16изменён
Перед сном натыкаюсь в инсте на парня, который рассказывает о своем увольнении из Plata за рилсы с сравнением Т-банка и Plata. Утром вижу, что рилс удален.Ищу что-то на подобную тему, нахожу рилс об этой ситуации с нарезкам рилсов того парня. Проходит полчаса - рилс удален.ЗабавноДата-инженерские заметки
4 сент., 11:51
Стать инженером данных всего за 10 недель — это реально!Если вы давно смотрите в сторону дата-инженерии или хотите зайти в профессию системно, а не одной ногой — сейчас самый подходящий момент.Симулейтив — школа аналитики, где обучают через практику и реальные кейсы, запускает пересобранный курс-буткемп - Профессия «Инженер данных».Курс разделен на 2 этапа: за первые 10 недель вы осваиваете базу и доходите до уровня junior-специалиста. А на втором этапе — углубленное изучение ключевых инструментов, где вы дорастаете до мидла.Что вас ждет на курсе: ➖SQL, Python, пайплайны сбора и обновления данных, хранение и обработка, DWH; ➖Живые занятия с ментором каждую неделю — не записи, а разборы вживую; ➖Подготовка к собеседованиям с первых недель, а не в самом конце;
Дата-инженерские заметки
25 авг., 10:30
Скрининг на позицию инженера данных в EY(Ernst & Young) в офис на КипреОтбор состоит из трех этапов: технический скрининг и два тех собеса. Первый этап можно назвать смесью фита и технички, присутствовал технический менеджер и HR. Вопросы были несложные, в основном по Spark и дата моделингу🤍Когда будешь использовать coalesce, когда repartition? 🤍Когда возникает шаффл и почему он тормозит джобы? 🤍Расскажи, что знаешь про dimensional modeling? (нормальные формы, схемы: звёздочка, снежинка, созвездие, Kimball vs Inmon)? 🤍Работал ли со spark streaming или кафкой, какие трудности возникали? 🤍Как строишь ETL/ELT пайплайны? 🤍Как обеспечиваешь идемпотентность пайплайнов?Дата-инженерские заметки
23 авг., 12:29
✍🏽✍🏽✍🏽
Дата-инженерские заметки
17 авг., 10:23
океей
Дата-инженерские заметки
14 авг., 14:38
Забыла рассказать, что у меня закончился испытательный срок и теперь я работаю в X5.В целом впечатления положительные: мне нравится руководитель - хороший баланс между готовностью помочь, заинтересованностью и доверием к подчинённым.В команде современный стек: Trino, ClickHouse, S3 и Iceberg и, в теории, реально выпросить развивающие технически задачи.Отбор был в два этапа: лайвкодинг и микс технички и фита: было интересно - давали кейсы, банальных вопросов было мало. Проблем с моей вилкой на этапе оффера тоже не возникло. Ранее X5 Tech проводили транляцию собеседования на дата инженера, так вот у меня было почти также, и вопросы мне задавал тот же собеседующий.Не хватает мне только возможности зимовки на Бали и коллег повайбовей, но это терпимо.
Дата-инженерские заметки
2 июл., 10:47изменён
смирились с оверэмплойментом получаетсяс другой стороны, это интересный ход — так можно найти квалифицированных кандидатов, которым нужна 2-3ья работа, за зп ниже рынка
Дата-инженерские заметки
24 июн., 19:03
спите?Дата-инженерские заметки
2 апр., 08:40
Дата-инженерские заметки
31 мар., 08:35
хочуДата-инженерские заметки
30 мар., 15:07
Собеседование в Авито: как после 5 собеседований я не получила офферСейчас отбор в Авито состоит из двух техничек и финалов в команды. Оба технических этапа длятся примерно час. На первом — одна задача на Python и несколько на SQL. На втором — одна на Python и одна на SQL. Интервьюеры были приятными — излишне не душнили, а задачи реалистичными — биты двигать не просили.Финалов было два: ⭕️На первом не дотянула грейдом — им нужен был DE на грейд выше.🟣Второй финал прошел хорошо. После созвона несколько раз уточнили в чате, точно ли мне нравятся их задачи (на первом финале все, чем занимается эта команда, я отнесла в категорию «чем заниматься не хочу» ахахах). После долгого игнора прислали отказ. Был еще финал с командой, у которой открытой вакансии нет, но может открыться (так и не появилась).Не понравились долгиеДата-инженерские заметки
30 мар., 10:26
Influence назвали оттенок помады ‘потоком данных’😭жду выхода оттенка ‘ETL’
Дата-инженерские заметки
25 мар., 11:33
даже самой Grimes пришлось создать Linkedin аккаунтну, и времена
Дата-инженерские заметки
16 мар., 16:55
как вам такое?🤭🙏🏽
Дата-инженерские заметки
8 мар., 12:50
Дорогие девушки этого канала, с праздником! 🌟Не забывайте, какие вы крутые профессионалки и сколько всего уже достигли!Продолжайте верить в себя и в друг друга!💗Дата-инженерские заметки
28 февр., 09:39
Русское слово «сложно» на английский можно перевести как difficult или hard. Однако эти два прилагательных не взаимозаменяемы.Для примера возьмём процесс набора мышечной массы хаха. Алгоритм действий понятен — следить за КБЖУ и заниматься силовыми тренировками. То есть всё вполне ясно и оттого вовсе не difficult, но при этом hard, потому что требует много дисциплины и мотивации.Надеюсь, аналогия понятна.Так вот, дата-инжиниринг для меня не hard, но действительно difficult. И прежде всего из‑за «солянки» технологий, которые постоянно меняются и быстро устаревают. Чтобы оставаться востребованным на рынке труда, нужно постоянно разбираться в новом дата‑стеке. Но и этого недостаточно — работодатель ждёт не только понимания требуемых технологий, но и подтверждённого промышленного опыта работы с ними. Чего, например, не наблюдается у тех же самых бэкендеров.Что делаете вы? ИзучаетеДата-инженерские заметки
27 февр., 12:09
Уже все телеграм каналы обсудили эту плашку у Ozon’a, но мне все равно хочется кое-что отметить.Забавляет не сама плашка, а то, что она у Ozon’a.Забавляет, потому что ни одна компания не отказывала мне так часто именно по причине нехватки опыта, как Ozon (те же самые Авито и Яндекс, например, резюме рассматривают), и из-за того, сколько знакомых накрутчиков там работают.Эта зацикленность на количестве лет в итоге работает как «самоисполняющееся пророчество» — чем жестче это требование, тем больше кандидатов добавляют себе годы опыта.В любом случае, факта, что Ozon — классный работодатель, это не отменяет.
Дата-инженерские заметки
25 февр., 11:06
у меня нет слов, одни эмоции
Дата-инженерские заметки
17 февр., 10:24
переслано из @chtotonainzhenernom
В продолжение вчерашней темы делюсь серией статей - Mastering Trino and Apache Iceberg: The Modern Data Stack Explained.Коротко: серия объясняет, как Trino и Iceberg вместе решают проблемы масштабирования, производительности и управления данными, заменяя устаревшие подходы (вроде Hive) и открывая путь к modern data stack 💅🏼Будет очень полезно тем, кто планировал основательно разобраться с Trino и Iceberg, но откладывал это. На мой взгляд, в этой серии лучшая выжимка базы по этим инструментам.Статьи серии: 1️⃣ Parquet и Iceberg: Фундамент Data-Архитектур → Зачем нужны колоночные форматы (Parquet) и табличные (Iceberg).2️⃣ Apache Iceberg: Будущее управления данными → ACID, версионирование, time travel — как Iceberg решает большие проблемы data lakes.3️⃣ Архитектура Trino и интеграция Trino и Iceberg → Как Trino взаимодействует с Iceberg-таблицами на уровне метаданных и данных.MediumSeries — Mastering Trino and Apache Iceberg: The Modern Data Stack ExplainedThis series explores the powerful combination of Trino and Apache Iceberg, two key technologies transforming modern data workflows. From…
