Каждый Data Scientist когда-либо строил дата пайплайны (Data Pipeline, ML Pipeline или их комбинации).
Я не строил :). Правда, с пета- и уж тем более зетабайтами у меня еще не было необходимости работать, а терабайты (кусками по паре сотен гигов) неплохо впихуются в RAM, только железА побольше надо. А вот железО я собирал собственноручно — бо в клауде такое б в копеечку вышло.
letyourmoneygrow.com/...beerwulfs-ebay-adventure
А статья интересная, возьму на заметку на будущее.
Понра про встречную задачку на интервью. Я тоже так любил делать, и кстати, очень хороший тест на адекватность интервьюера.
>
Мне бы тут и $300k не хватило
Тебе бы столько никто и не дал бы (мне, кстати, тоже, хотя — было дело — я на пару с коллегой зарабатывал для фирмы миллион в год, а потом нанятые в рамках оптимизации неодоучки стали по миллиону в год терять).
Называть их производителями углеводородов
Ты просто не в курсе их структуры производства — что конкретно у Petronas я не в курсе, но у того же ТОТАЛя, где я работал очень много именно производства (петрохимии). Не говоря уж о том, что отрасль высокотехнологична — взять вот хоть к теме статьи — те же вейвлеты были (пере)открыты именно, как сейчас бы их назвали, гео-датасцаентистами.
Жаль, что не могу поставить больше одного лайка.
P.S. Сам я с игроманством покончил еще со времен Спектрума, но тема-то обобщаема не только на гейминг.
Ну что ж, успехов!
Да, если что — я сам хотя и предполагал падение, все ж такого не ожидал.
Но т.к. у меня (почти) нет чисто спекулятивных позиций, а временнЫе горизонты достаточно длинные (пенсия) — я не дергаюсь.
какой смысл держать если оно падает, больше вложу на дне
Резонно.
Правда, вложившему на дне иногда дарят второе дно в подарок :)
Паникуешь? ;)
Я учитываю все риски, даже маловероятные.
Землянку уже выкопал? ;)
С одной стороны как бы да, а с другой, уже и не верится в такое. Но может Эрдоган подсобит
Может быть. Что в немецкой системе хорошо — так это стабильность и запас прочности. Челленжи, конечно, нехилые — но и обратные связи работают — со скрипом, но работают. Так что я (пока еще) оптимист.
Во, так что мне есть шанс увидеть настоящих немцев
Ну, злых тевтонов уже вряд ли www.youtube.com/watch?v=EAAVx0TVjuM
Но вот способных навести орднунг — вполне.
Да, есть опасность, что полезут драться
Да на хрена им это надо?
Задумываться начали уже сейчас — охрененные цены на недвигу и нулевые проценты по вкладам (при том что пенсия не светит), а так же стагнирующие зарплаты очень хорошо активирует думалку*, даже лучше кёльнской новогодней ночи.
Зеленый бред пока держится, но дает трещины.
*вот бы приспособить это к нейронкам — был бы настоящий прорыв в ИИ.
Ну, электричество же из воздуха в Германии берется,
Таки-да, реньюваблз дают 25% выработки, львиная доля из них — ветер.
Что вовсе не отменяет бредовости форсирования электротелег и гонения на дизель.
Короновирусная паника на рынке дает хороший повод напомнить вот об этом комментарии
dou.ua/...rums/topic/15217/#1315740
Статья весьма годная (во всяком случая в начале своего quant’ового пути я бы хотел ее прочитать).
Из технических замечаний — непонятно как состыковать рекомендацию использовать fractional differentiation(*) и при этом
Следите за тем, чтобы выборка была действительно независима, и не нарушалась ключеваяIID-гипотеза о распределении данных.
Кстати, дарю хороший челлендж — тут я привожу (искусственный, но не далекий от реальности) пример процесса, который маскируется под случайное блуждание, хотя таковым не является. Более того, общеупотребительные статистические тесты подвоха не замечают, при этом простая «торговая стратегия» прекрасно делала бы деньги, если б курс акций следовал бы такому процессу.
letyourmoneygrow.com/...alk-down-the-wall-street
Так вот, собственно, challenge — если ML модель может выделить эту закономерность на выборке ограниченного размера, то это — перспективная модель.
*(наверное, все-таки differencing, т.к. fractional differentiation — это про «полуторную производную» функции)
P.S.
Ну и традиционный вопрос — а у автора есть proven track record?
(в данном случае положительный ответ nice2have, но не musthave, т.к. автор не предлагает взять деньги в управление).
Иногда нужно, как, например, в RGui — где окно в окне.
И еще фулл-скрин часто нужен — чтоб все элементы управления окном скрылись, освободим место контенту
Win + Left Arrow, Win + Right Arrow?
Нет, не то. Ибо если
P.S.
Но за hot key hint спасибо, я и не знал этой комбинации.
А его можно в двухоконнный режим быстро переключить — типа, одна половинка — один (виртуальный) моник, вторая — другой? И так же быстро этот режим отключить (а потом опять включить)?
Прекрасно на 4k видно
Да. Но 4*4K в поле зрения не удержишь. А иногда надо сразу несколько графиков видеть.
заменю какой огибающей или фиильтрацией
Ага, и получишь среднюю температуру по больнице.
Ну так трейдеры, риск-аналитики, аналитики по ценным бумагам
У трейдеров свои конфигурации — обычно от 4х до 8ми в специальных стойках. Но если пригодится программировать и рассматривать не только графики цен, то это — неудобная конфигурация, во всяком случае для меня.
А зачем пиксели рассматривать.
А чтоб, например, такие графики лучше видеть :)
letyourmoneygrow.com/...eturns_CUTAT20percent.pdf
Таки-да. Кстати, desynchronization problem решилась как-то сама собой (благодаря то ли дополнительным кулерам, то ли новой версии TF). Но мне это уже стало неактуально — задачу я вполне решил и на CPU. Хотя сервачок с Теслой держу — мало ли будут другие задачи, где она сможет проявить свою мощь.