xrundel wrote: ↑10 Sep 2021 22:03 Ну конечно. И вход/въезд в здание обычно отдельный. Потому что не стоит знать народу с кем СЕО встречается часто - особенно когда компания публичная. Когда компании за миллиард то любая информация это огромное дело и может повлиять на сток/инвестиционное решение и т.д.
Мой опыт поиска работы Staff/Principal software engineer в 2021 году
-
- Уже с Приветом
- Posts: 742
- Joined: 08 Apr 2021 01:54
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
-
- Уже с Приветом
- Posts: 64661
- Joined: 12 Jul 2002 16:38
- Location: г.Москва, ул. Б. Лубянка, д.2
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
да и само здание отдельное, секретное. И внутри там даже не комнаты, а большой бункер. Устойчивый к ядерному удару, между прочим!dama123 wrote: ↑10 Sep 2021 23:07xrundel wrote: ↑10 Sep 2021 22:03 Ну конечно. И вход/въезд в здание обычно отдельный. Потому что не стоит знать народу с кем СЕО встречается часто - особенно когда компания публичная. Когда компании за миллиард то любая информация это огромное дело и может повлиять на сток/инвестиционное решение и т.д.
-
- Уже с Приветом
- Posts: 8192
- Joined: 27 Mar 2016 23:56
-
- Уже с Приветом
- Posts: 5104
- Joined: 19 Oct 2004 01:46
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Я именно на дейта инженеров и дейта сайнтистов ссылался. Если они попадают под ваше определение, тогда зарплата будет не очень. А если реально умеют решать практические задачи, тогда платят очень нормально.M. Ridcully wrote: ↑10 Sep 2021 18:34А "выпадающие из этих определенний" - это кто? А то слишком большое множество профессий остается, включая милицонера-ругулировшика движения, шпалоукладчицу, карточного шулера и т.д.Физик-Лирик wrote: ↑10 Sep 2021 00:36Те ученые/инженеры, которые прописаны в ваших определениях, получают немного. Выпадающие из этих определений получают много.M. Ridcully wrote: ↑09 Sep 2021 20:35 И что такое дата инженеры? Вроде, бывают Data Scientists (говнокодеры на Питоне с PhD в резюме, с умным видом занимающиеся подгонкой гиперпараметров), а бывают обычные погромисты в этом домене SWE in ML/DL (чоткие пацаны). Эти, а особенно первые, наверное? и могут что-то приличное получать.
А Data Engineer - погуглил, вроде как недопрограммисты, чистящие данные для data scientists - неужели эти много получают?
Или около "говнокодеров на Питоне" и подгонку гиперпараметров обязательно нужно было смайлик ставить? Так это я не со зла, а от зависти.
-
- Уже с Приветом
- Posts: 19041
- Joined: 11 Jan 2012 09:25
- Location: CA
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Дата инженерам так хорошо платят потому что они, в отличии от датасатанистов, не толко в одних ноутбуках умеют черновики царапать, а могут превратить это все в жизнь на очень больших объёмах данных . И могут делать серьёзный и правильный data cleansing
https://www.youtube.com/watch?v=wOwblaKmyVw
-
- Уже с Приветом
- Posts: 19041
- Joined: 11 Jan 2012 09:25
- Location: CA
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Это на тему изначального поста
https://www.youtube.com/watch?v=wOwblaKmyVw
-
- Уже с Приветом
- Posts: 31438
- Joined: 21 Nov 2004 05:12
- Location: камбуз на кампусе
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Хрюндель регулярно всплывает
Лучше переесть, чем недоспать! © Обратное тоже верно
-
- Уже с Приветом
- Posts: 5104
- Joined: 19 Oct 2004 01:46
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Ну да, помниться в этом разделе (где-то год назад) один товарищ показывал это превращение. Вместо того, чтобы подумать над алгоритмом предпочитал гонять тонны данных. Типичный программисткий подход.
Давайте не класть все в одну кучу. При работе с данными и моделями сейчас существуют три группы: дейта сайнтисты, дейта инженеры и МЛ инженеры (есть еще дейта аналисты, но это отдельный вопрос). У каждой группы свои конкретные задачи, хотя, безусловно, границы между группами не являются "фиксированными". Ну не надо все упрощать. И решение практических задач не сводится исключительно к подготовке данных. Так же как и не сводится лишь к подгонке моделей.
-
- Уже с Приветом
- Posts: 31438
- Joined: 21 Nov 2004 05:12
- Location: камбуз на кампусе
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
если такой умный, покажи что небедный.Физик-Лирик wrote: ↑13 Sep 2021 03:04 И решение практических задач не сводится исключительно к подготовке данных. Так же как и не сводится лишь к подгонке моделей
Иногда кажусь себе умным, но потом смотрю на свою ЗП, невозможность сменить работу и место жительства и делаю корректировку
Лучше переесть, чем недоспать! © Обратное тоже верно
-
- Уже с Приветом
- Posts: 19041
- Joined: 11 Jan 2012 09:25
- Location: CA
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
В одну кучу это сложили вы. Я наоборот объяснила почему дата инженерам хорошо платят, потому что вопрос был так сформулирован, как будто они того не не стоят. Их труд тоже важен, есть своя экспертиза и ее не хватает прямо сейчас.Физик-Лирик wrote: ↑13 Sep 2021 03:04Ну да, помниться в этом разделе (где-то год назад) один товарищ показывал это превращение. Вместо того, чтобы подумать над алгоритмом предпочитал гонять тонны данных. Типичный программисткий подход.
Давайте не класть все в одну кучу. При работе с данными и моделями сейчас существуют три группы: дейта сайнтисты, дейта инженеры и МЛ инженеры (есть еще дейта аналисты, но это отдельный вопрос). У каждой группы свои конкретные задачи, хотя, безусловно, границы между группами не являются "фиксированными". Ну не надо все упрощать. И решение практических задач не сводится исключительно к подготовке данных. Так же как и не сводится лишь к подгонке моделей.
https://www.youtube.com/watch?v=wOwblaKmyVw
-
- Уже с Приветом
- Posts: 5104
- Joined: 19 Oct 2004 01:46
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Делаете корректировку на что?kyk wrote: ↑13 Sep 2021 03:46если такой умный, покажи что небедный.Физик-Лирик wrote: ↑13 Sep 2021 03:04 И решение практических задач не сводится исключительно к подготовке данных. Так же как и не сводится лишь к подгонке моделей
Иногда кажусь себе умным, но потом смотрю на свою ЗП, невозможность сменить работу и место жительства и делаю корректировку
Ум и зарплата не имеют сильной корреляции. Например, далеко не всегда человек может себя "трудоустроить". Занимайтесь тем, чем нравится и не думайте о зарплате.
Вы не просто объяснили, а именно сравнили с дейта сайнтистами. Причем в определенной манере. Это лишь доказывает, что либо вы не до конца понимаете, как все это дело работает либо у вас на них зуб .
-
- Уже с Приветом
- Posts: 19041
- Joined: 11 Jan 2012 09:25
- Location: CA
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Никакой не зуб, более того я сама туда посматриваю. Просто как дата инженер работающий с теми же data scientist во первых не могу отрицать их снобизм в наш адрес, а во вторых прекрасно вижу что, несмотря на этот их снобизм, экспертиза у них совсем другая и без правильного дата инженера хрен они что построят production scale.
Спрос сейчас на дата инженеров просто сумасшедший.
Спрос сейчас на дата инженеров просто сумасшедший.
https://www.youtube.com/watch?v=wOwblaKmyVw
-
- Уже с Приветом
- Posts: 5104
- Joined: 19 Oct 2004 01:46
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
А вот с этими утверждениями я как раз полностью согласен. Я как раз считаю, что ученые без инженеров никуда. Сейчас спрос и на ученых и на дейта инженеров.Сабина wrote: ↑13 Sep 2021 13:13 Никакой не зуб, более того я сама туда посматриваю. Просто как дата инженер работающий с теми же data scientist во первых не могу отрицать их снобизм в наш адрес, а во вторых прекрасно вижу что, несмотря на этот их снобизм, экспертиза у них совсем другая и без правильного дата инженера хрен они что построят production scale.
Спрос сейчас на дата инженеров просто сумасшедший.
-
- Уже с Приветом
- Posts: 18862
- Joined: 30 Aug 2001 09:01
- Location: 3rd planet
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Private jet как mandatory travel option забыл.
Тупизна как Энтропия. Неумолимо растет.
-
- Уже с Приветом
- Posts: 11999
- Joined: 08 Sep 2006 20:07
- Location: Силиконка
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Да, я так и представлял, но не очень понимаю по-прежнему, чем занимаются data engineers. Data scientists занимаются моделями - выбирают подходящие и т.д. ML engineers делают инструменты для data scientists - libraries and frameworks.Физик-Лирик wrote: ↑13 Sep 2021 03:04 При работе с данными и моделями сейчас существуют три группы: дейта сайнтисты, дейта инженеры и МЛ инженеры
А что деляют data engineers - запускают все это в production? То есть это специализация backend SWE?
Мир Украине. Свободу России.
-
- Уже с Приветом
- Posts: 5104
- Joined: 19 Oct 2004 01:46
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
ЕТЛ в основном. Учитывая, что сейчас популярны биг дейты на клауде, они там эти ЕТЛы и воспроизводят. Формально, нет уж такой жесткой градации, и тот же деплоймент могут как инженеры так и ученые делать. Если уж совсем "литературно" описывать, то дейта сайнтисты - это мозг, МЛ - это сердце, а дейта инженеры - это кровеносная система. На практике при формировании команд, все как то сами свои роли выбирают. Кому больше программировать нравится, кому клауды гонять, кому идеи формулировать и прототипы модели строить (например, на тех же клаудах). В общем, так в целом и работает. Все "компоненты" команды одинаково важны.M. Ridcully wrote: ↑13 Sep 2021 18:52Да, я так и представлял, но не очень понимаю по-прежнему, чем занимаются data engineers. Data scientists занимаются моделями - выбирают подходящие и т.д. ML engineers делают инструменты для data scientists - libraries and frameworks.Физик-Лирик wrote: ↑13 Sep 2021 03:04 При работе с данными и моделями сейчас существуют три группы: дейта сайнтисты, дейта инженеры и МЛ инженеры
А что деляют data engineers - запускают все это в production? То есть это специализация backend SWE?
Last edited by Физик-Лирик on 13 Sep 2021 21:19, edited 1 time in total.
-
- Уже с Приветом
- Posts: 742
- Joined: 08 Apr 2021 01:54
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
-
- Уже с Приветом
- Posts: 31438
- Joined: 21 Nov 2004 05:12
- Location: камбуз на кампусе
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
ну так делайте его работу и получайте его деньги. Делов-то.Снежная Королева wrote: ↑14 Sep 2021 03:59 (да, у нас менеджеры идиоты, и я не могу объяснить им, почему дата инженеру надо платить больше чем мне, когда я могу делать его работу, а он мою не может).
А если не хотите или не можете, тогда и не зузжите
Такова костлявая рука рынка
Лучше переесть, чем недоспать! © Обратное тоже верно
-
- Уже с Приветом
- Posts: 5104
- Joined: 19 Oct 2004 01:46
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Да нету никакой руки. Проще в другую контору уйти с повышением (тем же инженером), чем расти внутри. Сами ведь все знаете.kyk wrote: ↑14 Sep 2021 04:32ну так делайте его работу и получайте его деньги. Делов-то.Снежная Королева wrote: ↑14 Sep 2021 03:59 (да, у нас менеджеры идиоты, и я не могу объяснить им, почему дата инженеру надо платить больше чем мне, когда я могу делать его работу, а он мою не может).
А если не хотите или не можете, тогда и не зузжите
Такова костлявая рука рынка
-
- Уже с Приветом
- Posts: 4185
- Joined: 27 Apr 2011 03:43
- Location: Сергели ->Chicago
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
data engineer это еще один оттенок бакэнд инженера.M. Ridcully wrote: ↑13 Sep 2021 18:52Да, я так и представлял, но не очень понимаю по-прежнему, чем занимаются data engineers. Data scientists занимаются моделями - выбирают подходящие и т.д. ML engineers делают инструменты для data scientists - libraries and frameworks.Физик-Лирик wrote: ↑13 Sep 2021 03:04 При работе с данными и моделями сейчас существуют три группы: дейта сайнтисты, дейта инженеры и МЛ инженеры
А что деляют data engineers - запускают все это в production? То есть это специализация backend SWE?
отличия скорее в том что он знаеет/умеет работать с большими данными и различными базами и фреймворками под них.
тут же упоминались etl и МЛ и прочие дата дривен разработки - это все типо дата инженер.
хороший инженер он еще и архитектор который может подобрать подходящие тулзы, технологии, клауды для того чтобы уложиться в бюджет и производительность.
к примеру:
анализ видео стримов, сайнтист и сишник могут на пару разработать алгоритм анализа стрима, упрощенно функцию.
следующей задачей эту функцию надо заскейлить на сотни и тысячи стримов.
что делает дата инженер, оборачивает функцию в контейнер и строит систему, куда скидываются стримы и асинхронно запускаются функции анализа,
которые по результату скидывают все в какой нибудь БД, из которой кормится дэшборд в реальном времени.
Все это должно работать 24х7 и авто-скейлиться в зависимости от нагрузки.
-
- Уже с Приветом
- Posts: 18862
- Joined: 30 Aug 2001 09:01
- Location: 3rd planet
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Это в теории. А на практике - на коленке делается MVP, затем запускается в продакшн, и, когда он начинает (а он обычно начинает, ибо коленка - крива) затыкаться - его скейлят по памяти и/или инстансам до тех пор, пока затык не проходит - оно же резиновое!
Как недавно сказал мне очень молодой и очень уверенный в себе кандидат на интервью - "Любую задачу сегодня можно решить при помощи любой технологии!" Юмор и юношеский задор я оценил, кандидата - не очень.
Тупизна как Энтропия. Неумолимо растет.
-
- Уже с Приветом
- Posts: 4185
- Joined: 27 Apr 2011 03:43
- Location: Сергели ->Chicago
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
на практике по разному, многое диктуется бюджетом и сроками. Если мвп укладывается в бюджет то почему бы и нет, что тут плохого?
-
- Уже с Приветом
- Posts: 472
- Joined: 01 Nov 2017 21:42
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Короче, из моей "крутой" конторы пока нет оффера на 500 Когда я им сказал, что меньше 500 не рассматриваю, назначили ещё одно интервью) Которое начнется через полчаса
-
- Уже с Приветом
- Posts: 18862
- Joined: 30 Aug 2001 09:01
- Location: 3rd planet
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
Ессно по разному, и если укладывается и работает как дОлжно - то все путем, хорошие решения тоже проходят путь POC -> MVP.
Тупизна как Энтропия. Неумолимо растет.
-
- Уже с Приветом
- Posts: 4185
- Joined: 27 Apr 2011 03:43
- Location: Сергели ->Chicago
Re: Мой опыт поиска работы Staff/Principal software engineer в 2021 году
ждем отчетаБубновый Валет wrote: ↑14 Sep 2021 20:23 Короче, из моей "крутой" конторы пока нет оффера на 500 Когда я им сказал, что меньше 500 не рассматриваю, назначили ещё одно интервью) Которое начнется через полчаса