Программирование

Ответить в тред Ответить в тред
НЕЙРОНОЧКИ И МАШОБ ТРЕД №26 /ai/ Аноним 26/06/20 Птн 18:50:46 17347101
1.jpg 215Кб, 1386x881
1386x881
2.png 4514Кб, 1503x933
1503x933
3.jpeg 18Кб, 390x199
390x199
Очередной тред про хипстерские технологии, которые не работают.

Я ничего не понимаю, что делать?
Вкатывальщики импортят slesarplow as sp по туториалам (хотя сейчас актуальнее keras и pytorch)
Толковые качают из репозитория awesome-XXXX на гитхабе проект какого-то китайца, меняют фамилию и получают $10M инвестиций как стартап.
Умные смотрят prerequisites на https://see.stanford.edu/Course/CS229 и http://cs231n.stanford.edu/
Остальные сидят ИТТ

Какая математика используется?
В основном линейная алгебра, теорвер, матстат, базовый матан и matrix calculus.

Как работает градиентный спуск?
https://cs231n.github.io/optimization-2/

Почему python?
Исторически сложилось

Можно не python?
Никого не волнует, где именно ты натренируешь свою гениальную модель. Но при серьезной работе придется изучать то, что выкладывают другие, а это будет, скорее всего, python, если работа последних лет

Что почитать для вкатывания?
http://www.deeplearningbook.org/
Николенко "Глубокое обучение" - на русском, есть примеры, но меньше охват материала
Франсуа Шолле - Глубокое обучение на Python

В чем практиковаться нубу?
http://www.deeplearning.net/tutorial/
https://www.hackerrank.com/domains/ai
https://github.com/pytorch/examples
https://github.com/ChristosChristofidis/awesome-deep-learning#tutorials

Где набрать первый самостоятельный опыт?
https://www.kaggle.com/ | http://mltrainings.ru/
Стоит отметить, что спортивный deep learning отличается от работы примерно так же, как олимпиадное программирование от настоящего. За полпроцента точности в бизнесе борятся редко, а в случае проблем нанимают больше макак для разметки датасетов. На кагле ты будешь вилкой чистить свой датасет, чтобы на 0,1% обогнать конкурента.

Где работать?
https://www.indeed.com/q-deep-learning-jobs.html
Вкатывальщики могут устроиться программистами и дальше попроситься в ML-отдел

Где узнать последние новости?
https://www.reddit.com/r/MachineLearning/
http://www.datatau.com/
https://twitter.com/ylecun
На реддите также есть хороший FAQ для вкатывающихся

Где посмотреть последние статьи?
http://www.arxiv-sanity.com/
https://paperswithcode.com/
https://openreview.net/

Количество статей зашкваливающее, поэтому все читают только свою узкую тему и хайповые статьи, упоминаемые в блогах, твиттере, ютубе и телеграме, топы NIPS и прочий хайп. Есть блоги, где кратко пересказывают статьи, даже на русском

Где ещё можно поговорить про анализ данных?
http://ods.ai/

Нужно ли покупать видеокарту/дорогой пека?
Если хочешь просто пощупать нейроночки или сделать курсовую, то можно обойтись облаком. На март 2020 Google Colab дает бесплатно аналог GPU среднего ценового уровня (что-то между 1050 и 1080) на несколько часов с возможностью продления.
Иначе выгоднее вложиться в GPU https://timdettmers.com/2019/04/03/which-gpu-for-deep-learning/ Заодно в майнкрафт на топовых настройках погоняешь

Когда уже изобретут AI и он нас всех поработит?
На текущем железе - никогда, тред не об этом

Список дедовских книг для серьёзных людей:
Trevor Hastie et al. "The Elements of Statistical Learning"
Vladimir N. Vapnik "The Nature of Statistical Learning Theory"
Christopher M. Bishop "Pattern Recognition and Machine Learning"
Взять можно тут: http://libgen.io/

Напоминание ньюфагам: немодифицированные персептроны и прочий мусор середины прошлого века действительно не работают на серьёзных задачах.

Предыдущий:
https://2ch.hk/pr/res/1704037.html
https://2ch.hk/pr/res/1665515.html
Аноним 26/06/20 Птн 18:52:09 17347142
images.jpeg 7Кб, 259x194
259x194
Аноним 26/06/20 Птн 21:57:21 17348403
Google-Cloud-Au[...].jpg 68Кб, 1024x512
1024x512
Ну што, вы готовы, дети? Аутомл на одном проце, без видеокарт, за 12 часов с нуля вкатился в машобчик, и пользуясь полученными знаниями, улучшил себя. А вы за сколько вкатитесь? То-то.
> AutoML-Zero has already discovered neural networks, back-propagation, data-augmentation etc. from scratch within 12 hrs on a single CPU. It can adapt to lack of training data, required training speed and tasks.
https://bigthink.com/surprising-science/automl?rebelltitem=2#rebelltitem2
Ссылочка на архив: https://arxiv.org/abs/2003.03384

освятил
Аноним 26/06/20 Птн 22:01:18 17348414
>>1734840
Сейчас бы в 2020 верить в Дарвинистское говно и эволюцию.
Аноним 26/06/20 Птн 22:02:37 17348425
>>1734841
Креативист в треде?
Введение в ML.Net Аноним 26/06/20 Птн 22:07:34 17348456
CycleGAN and pix2pix in PyTorch. Как превратить зебру в лошадь и наоборот Аноним 26/06/20 Птн 22:11:53 17348487
horse2zebra.gif 7506Кб, 448x128
448x128
Аноним 26/06/20 Птн 22:20:01 17348568
>>1734842
>Креативист
Иногда креативлю, да
Аноним 26/06/20 Птн 22:21:29 17348589
>>1734848
2020 год, решена основная проблема человечества как превратить зебру в лошадь и наоборот
Аноним 26/06/20 Птн 22:22:42 173486010
>>1734848
>Как превратить зебру в лошадь и наоборот
Кстати на хуй то волос хвоста окрашен в полоску?
Аноним 26/06/20 Птн 23:05:42 173488711
Я вот как то хотел сделать физон для два дэ игры и среди всяких уебанов нарвался на охуенного чувака, который ведет себя как главный герой американского психопата и его плейлист nature of code. Плейлист вроде как про нейросетки, хотя там был раздел про физические силы. Вскоре на игру я забил, а про нейросетки даже и не думал. Но увидел ваш тред и стало интересно как вы оцениваете этот плейлист, а вообще есть и одноименная книга.
Аноним 26/06/20 Птн 23:08:02 173489112
>>1734841
Дебилок, эволюция это не предмет веры, а объективный факт.
Аноним 26/06/20 Птн 23:31:38 173490713
>>1734848
если бы еще полоски оставались на тех же местах от кадра к кадру. Т.е. норм было бы, если бы оно генерировало одну конкретную зебру для данной сессии, а потом накладывало именно её на имеющуюся лошадь
Аноним 26/06/20 Птн 23:39:49 173491114
>>1734891
>а объективный факт
Промежуточное звено гомосапиенса и обезяныча уже нашел?
Аноним 27/06/20 Суб 02:08:04 173499015
>>1734911
> Промежуточное звено гомосапиенса и обезяныча уже нашел?
Ага, вот такие как ты.
Аноним 27/06/20 Суб 02:28:57 173499316
>>1734840
>cifar
Можно ещё iris dataset взять, там вообще брутфорсом структуру модели можно подобрать.
Аноним 27/06/20 Суб 02:37:46 173499517
>>1734993
Але, подборка весов любой нейрон очки на любом датасете это брутфорс, только направленный в сторону уменьшения лосса.
Аноним 27/06/20 Суб 04:48:05 173501018
Аноним 27/06/20 Суб 05:39:08 173501519
>>1735010
Что-то ты мало выложил
Алгоритм облажался
https://twitter.com/bradpwyble/status/1274380641644294150
Ле Кун попробовал объяснить, почему (потому что в датасете были одни белые лица) и вызвал СЖВ шитшторм ее подсосов
https://twitter.com/ylecun/status/1274782757907030016
https://twitter.com/ylecun/status/1275176322617290752
https://twitter.com/ylecun/status/1275162528511860737

В общем, ничего нового
Аноним 27/06/20 Суб 06:09:06 173501920
>>1735015
А еще во втором твите он ее практически приглашает в свой отдел (где оочень жирные ЗП, ориентировочно $500к+). Вот так ноунейм "активистка" подняла себя за волосы на подиум. И это еще не конец, бгг; на реддите уже говорят, что это мол и не извинение вовсе. Ведь он не раскаялся в своем грехе, а только в том, что "the way I communicated here became the story."
Еще погоди, его вполне могут кэнсельнуть и на его место нанять @timnitGebru. Которую ФБ уволить не сможет уже НИКОГДА под страхом полной ликвидации.
Если очень повезет, увидим как ЛеКуна лишат Тьюринговской премии, ммм.
Аноним 27/06/20 Суб 06:15:25 173502121
>>1734907
у нвидии есть похожая задача для создания карты глубин в видео, чтобы они не скакали от кадра к кадру, там подается инфа о трех прошлых кадрах в сетку. О сохранении формы в сложных цветовых схемах а не в 256 цветах там пока речи не идет. Держу в курсе.
Аноним 27/06/20 Суб 07:25:22 173502922
>>1734887
научпокерский кал на уровне индуса, который сплагиатил рисеч пэйпер.
Аноним 27/06/20 Суб 07:36:06 173503223
>>1735019
а хуле толстосумам не поебать на визг душевнобольных, которые даже не покупают и не работают в этой индустрии или они так триггерят массы быдлопотребителей, что игнорить нельзя?
Аноним 27/06/20 Суб 08:07:14 173504424
>>1735019
Она уже в гугле работает, в Ethical Artificial Intelligence Team. Не, это именно попытка поговорить вне твиттера, но ей это нахер не нужно.
Аноним 27/06/20 Суб 09:22:16 173505425
TimnitGebruHead[...].png 546Кб, 900x900
900x900
>>1735044
О да, дэвушка предприимчивая оказалась. Оседлала сразу два стула, нейроночки и БЛМ, да как красиво! И сама, главное, черная. Это же просто техно-Иисус 2020. С кем ЛеКун начал бодаться, он ведь даже не понимает, что происходит, бедняга. Она его растопчет, даже не заметив.
Единственно правильный вариант был ничего не отвечать. Если раскрывать рот - то только для того, чтобы каяться, посыпать голову пеплом, и бичевать себя, стоя на коленях.
Аноним 27/06/20 Суб 10:51:45 173507626
>>1735032
> или они так триггерят массы быдлопотребителей, что игнорить нельзя?
This. Репутационные издержки вещь опасная. Иначе того же миллиардера Вайнштейна никто бы на бутыль не усадил из-за беспруфных (!!!) кукареканий рандомных сельдей.
Аноним 27/06/20 Суб 11:24:31 173508927
image.jpg 29Кб, 620x330
620x330
>>1735044
> Ethical Artificial Intelligence Team
И чем эта подмывальня занимается? Цензуркой, чтобы нидайбох в датасеты не попадало еблищ белых угнетателей?
Аноним 27/06/20 Суб 12:37:49 173512128
Да, я знаю, что это тред про ML.

Кто-нибудь пробовал размечать дата-сеты через братьев наших меньших через сервис MTurk?
https://requester.mturk.com/create/projects/new
Меня интересует задача "Instance Segmentation", то есть разметка объектов на фотографии. Допустим, у меня есть 3-5 классов объектов, и я знаю, что на 95% моих изображений есть как минимум один объект.
1. Можно ли один и тот же сет отдать двум разным работникам? Либо можно ли во время создания задания создать предикат "id работника не равно XXXXXX"? Тогда я бы смог отдать этот же сет, но кому-угодно кроме первого исполнителя. Я смотрел, в целом предикаты для задач есть.
2. Сколько платить беднягам? Я посмотрел на других сайтах, написано: исходите из того, чтобы за час работы у работника выходило $6.5 в час (в США минималка $7.25/час)
Аноним 27/06/20 Суб 12:52:25 173512929
>>1735076
В смысле беспруфных? Ты вообще следил за судебным процессом? Там было более чем достаточно чтоб его закрыть до конца жизни, но дорогущие адвокаты богатенького хуесоса смогли всё таки выбить всего 23 года. И заебись, следующий раз богатое говно задумается, прежде чем руки распускать.
Аноним 27/06/20 Суб 13:45:07 173515530
>>1735121
Оверпрайс это все. Я на дваче разметчиков искал, в воркаче в толока-треде бросал мыло, или еще где-то. Выходили копейки какие-то.
Аноним 27/06/20 Суб 13:51:40 173516131
>>1735121
что за странная цена в часах. Все же должно зависеть от сложности и количества.
Аноним 27/06/20 Суб 13:58:21 173516532
>>1735129
Да, а Майкл Джексон ебал детей
Аноним 27/06/20 Суб 14:03:34 173516733
>>1735155
https://toloka.ai/ru
А забавно. Я думал, что у Толоки только Яндекс может быть заказчиком
Аноним 27/06/20 Суб 14:06:56 173517134
>>1735167
Да это тоже нахер, если ты не корпорация с гигабайтами датасетов, которые нужно размечать за пару дней. Нанял одного человека и подкидываешь ему работу.
Аноним 27/06/20 Суб 14:10:39 173517835
>>1735171
Как исполнитель отдавал тебе отчёт по заданию? У меня первым вариантом было написать самодельную веб-морду и показывать исполнителю, нехай сидит да печатает

Сет скажем на 100 000 изображений. В целом на данный момент занимает 30 гигабайт
Аноним 27/06/20 Суб 14:31:08 173519136
>>1735178
Какой отчет? Датасет либо есть, либо его нет. О чем отчитываться. Для разметки есть готовый софт, гуглится по image labeling tool. LabelMe например, работает в браузере.
>Сет скажем на 100 000 изображений. В целом на данный момент занимает 30 гигабайт
Ну с такими объемами наверное лучше на толоку
Аноним 27/06/20 Суб 17:02:00 173528037
>>1735178
вероятно ты спрашиваешь про механизм передачи сета и денег параллельно- чувак пусть запишет видос с папкой, в которой датасет и пусть тебе скинет сразу же картинки, которые тебе хочется посмотреть из того видоса поближе, для проверки на пробу, скажем штук 20 из 1000- если нравится ты платишь. Если не нравится- негр допиливает. По итогу никто не хочет кинуть никого и остаться с сетом бесполезным (о, тут уже вопрос, не продаст ли он его налево) или без него. Как-то так.
Аноним 27/06/20 Суб 17:36:55 173529738
>>1735178
Для валидного обучения нужно 5 000+ картинок с равномерным распределением классов, так? Меньше нет смысла. Ты какие по размерам сеты одиночным исполнителям отдаёшь?
Аноним 28/06/20 Вск 17:26:27 173603439
Здарова. Есть какие-то способы применения машинного обучения в финансах?
Аноним 28/06/20 Вск 19:53:29 173614440
11.png 100Кб, 1183x833
1183x833
Аноним 28/06/20 Вск 20:02:15 173615241
>>1736144
Что это за магия? Ты колдун?!
Аноним 28/06/20 Вск 20:59:57 173623942
1
Аноним 28/06/20 Вск 21:50:32 173631243
21341254425.jpg 121Кб, 1920x1080
1920x1080
Аноны, а не боитесь, что кто-нибудь выпустит простое в использовании решение для обработки данных, в котором любая тётя Дуся сможет мышкой накидать простейшую блок-схему?
Аноним 28/06/20 Вск 22:06:28 173633644
>>1736312
>любая тётя Дуся сможет мышкой накидать простейшую блок-схему
Чем это отличается от трясуновподборщиков параметров?
Аноним 28/06/20 Вск 22:46:01 173639145
>>1736312
Это называется прогресс, что его бояться. Бояться нужно внезапного отупления до уровня тети дуси
Аноним 29/06/20 Пнд 01:16:55 173652446
>>1736312
Во-первых, тетя Дуся не знает теории, так что даже такой простой инструмент осилить не сможет.

Во-вторых, профессиональный трясун черных ящиков имеет опыт и интуицию, и получит результаты намного лучше.

В-третьих, в реальных задачах возникают проблемы с производительностью, при возникновении которых система с пикчи просто повиснет. Например, если данных терабайты, и они не лезут в память.

Ну и напоследок, такая система имеет крайне лимитированный функционал, и в ней уж точно не будет state-of-the-art моделей, которые появляются каждый месяц.
Аноним 29/06/20 Пнд 02:19:50 173655047
>>1736524
> Во-первых, тетя Дуся не знает теории, так что даже такой простой инструмент осилить не сможет.
Вся теория есть в педивикии, никаких тайных знаний для понимания машобчика не требуется.
> Во-вторых, профессиональный трясун черных ящиков имеет опыт и интуицию, и получит результаты намного лучше.
Чем тетя Дуся? Да. Чем аутомл? Вряд ли.
> В-третьих, в реальных задачах возникают проблемы с производительностью, при возникновении которых система с пикчи просто повиснет. Например, если данных терабайты, и они не лезут в память.
Лезут данные в память или нет, зависит от используемого софта. В правильном софте ничто никуда не лезет.
> Ну и напоследок, такая система имеет крайне лимитированный функционал, и в ней уж точно не будет state-of-the-art моделей, которые появляются каждый месяц.
И которые потом нигде не используются кроме самого пейпера с табличкой, показывающей что новая ололо модель превосходит старые в паре тестов на 0.1%.
Аноним 29/06/20 Пнд 03:10:40 173655448
>>1736550
Шиз, может ты стажировку где-то найдёшь что хоть чуток с мл поработать и не нести тут хуйни?
Аноним 29/06/20 Пнд 03:12:15 173655549
image.png 187Кб, 1724x834
1724x834
>>1736550
>Вся теория есть в педивикии, никаких тайных знаний для понимания машобчика не требуется.
Так-то в интернете есть все, но сможет ли тетя Дуся понять хотя бы пикрил?
>Чем аутомл? Вряд ли.
Мы про построение моделей без программирования или про аутомл? Ну и давай пруфы, что аутомл хорошо работает на чем-нибудь кроме MNIST.
>Лезут данные в память или нет, зависит от используемого софта. В правильном софте ничто никуда не лезет.
Ты вообще понял о чем я? Мне кажется что ты зумер, который даже говнокодить не умеет.
>И которые потом нигде не используются кроме самого пейпера с табличкой, показывающей что новая ололо модель превосходит старые в паре тестов на 0.1%.
Ну да, особенно в NLP, где за последние несколько лет state-of-the-art сменился раз пять, и каждый раз улучшения были огромные.
Аноним 29/06/20 Пнд 03:57:11 173655850
15923462595780.jpg 177Кб, 1024x768
1024x768
>>1736555
> Ну да, особенно в NLP, где за последние несколько лет state-of-the-art сменился раз пять, и каждый раз улучшения были огромные.
Где? Где огромные улучшения по сравнению хотя бы с фасттекстовскими алгоритмами из 2014 в лучшем случае?
> но сможет ли тетя Дуся понять хотя бы пикрил?
А тут многие это понимают, если честно?
>>1736554
> пок
Аноним 29/06/20 Пнд 05:06:54 173656551
>>1736558
Не пок, а учись давай, школота ленивая!
Аноним 29/06/20 Пнд 05:14:03 173656652
Как вкурить в Loss_D и Loss_G в GAN?
Чот нихуя не понимаю. К чему они должны стремиться?
29/06/20 Пнд 08:52:27 173661653
>>1735171
Боюсь Automl от больших компаний, которые переведут консалтинг задешево онлайн и будут пользоваться силой бренда. Даже если меня не уволят, зарплаты это обрушит
Аноним 29/06/20 Пнд 12:34:15 173671054
>>1736558
> Где огромные улучшения по сравнению хотя бы с фасттекстовскими алгоритмами из 2014 в лучшем случае?
Нечеткий имени ML-треда word2vec конструктивный шизик разбушевался. Сможешь ли ты с ним совладать?
Аноним 29/06/20 Пнд 12:41:32 173671555
>>1736710
Ты лучше на вопрос ответь. Хотя, что может ответить тайдмен...
Аноним 29/06/20 Пнд 13:13:01 173673956
>>1736566
К чему хочешь, главное, чтобы в разные стороны
Аноним 29/06/20 Пнд 14:18:50 173680357
>>1736616
> обрушит
ага-ага нет
Аноним 29/06/20 Пнд 19:14:16 173712758
>>1736616
>зарплаты это обрушит
Зарплат и так нет, так что обрушивать нечего.
29/06/20 Пнд 21:48:47 173727459
>>1737127
Если посмотреть сколько платят в регионах (там часто у миддлов тыщ 70), а с короной ещё и все на удаленку переходят. Так что дно ещё не достигнуто. А в Дата Сайанс ещё и перекатиться можно из гораздо большего ряда дисциплин. Ставлю свечку за Грефа и молюсь, чтобы он их не выпер единочасно всех на мороз. Когда Самсунг в прошлом году выгнал своих NLP-шников, мы им отказывать не успевали. Поток мыслей.
29/06/20 Пнд 21:50:40 173727960
>>1736558
Ты хотя бы раз классификацию запускал на текстах? Хотя бы imdb? Там во многих задачах по 10 F1 Берт накидывает.
Аноним 29/06/20 Пнд 22:12:44 173730361
>>1737274
>Когда Самсунг в прошлом году выгнал своих NLP-шников
Что у них случилось там?
Аноним 29/06/20 Пнд 22:20:13 173731162
>>1737274
>А в Дата Сайанс ещё и перекатиться можно из гораздо большего ряда дисциплин
У тебя эффект, обратный даннингу-крюгеру. Перекатиться сложно, 90% вообще отвалится на этапе томного взгляда на консоль-пердоль. Я проверял.
Аноним 29/06/20 Пнд 22:39:43 173732463
>>1737274
> NLP
что это такое? Я только нейро-лингвистическое программирование знаю
> Самсунг
Можно ссылку на историю?
Аноним 29/06/20 Пнд 23:29:47 173736764
>>1737274
> мы им отказывать не успевали
Тоже не нужны?
Аноним 30/06/20 Втр 00:15:37 173738765
>>1737274
> . Когда Самсунг в прошлом году выгнал своих NLP-шников, мы им отказывать не успевали.
То есть я правильно понимаю, Сосунг уже выгоняет макак ссаными тряпками на мороз, а местные дифиченто все ещё закрывают глаза, затыкают уши и визжат "рреее врети все, нечеткий петух, абырвалг!!11222". Как называется эта болезнь?
Аноним 30/06/20 Втр 00:16:13 173738966
Аноним 30/06/20 Втр 00:21:04 173739067
>>1737324
Сейчас погуглил ОДС - там какой-то голосовой помощник был "биксби", проект закрыли.


>>1737324
>Про насколько плохо -
>Весь Биксби проект увольняют, всех аутсорсеров. Человек 25 плюс стажёры ещё.
>Замечу,что сделали это неожиданно и без предупреждения (те предпосылки были, но корейцы темнили до конца)
>Очередной кризис продаж Самсунга - теперь спасибо раскладушкам, видимо.
>Сокращенным заплатят только за май (контрактники)
>Народ боролись несколько месяцев, переговоры с корейцами вели
>Но денег нет на srr. Всех под нож
>Даже постоянные сотрудники не в безопасности, тк нет проектов
Аноним 30/06/20 Втр 01:06:45 173742468
>>1737390
Бикси реально кал говна. У меня Самсунг, но я только Гуглом и иногда Алисой пользуюсь
Аноним 30/06/20 Втр 02:29:44 173746269
image.png 130Кб, 1026x573
1026x573
Капец парни решил вкатится в эту тему, с практически нулеывми знаниями матана, выбрал для чтения https://www.deeplearningbook.org/, дочитал до конца ленейную алгебру, все было очень туго, но все таки хоть как-то шло а потом там в конце был пример, в конце которого аж руки опустились (по ходу рассужденея, все вроде было понятно, я только не понял момент с оператором перевенутого треугольника, vector calculus) и пришло осознание что я говно, и надо было в институте нормально учится:
> This optimization problem may be solved using eigendecomposition. Specifically, the optimal d is given by the eigenvector of X-transposedX corresponding to the largest eigenvalue.
Почему это так я не понимаю вернее интуитивно мне кажется что я понимаю почему, потому что там где больше всего eigenvalue, тот вектор вносит самый большой вклад в сет X.
> This derivation is specific to the case of l = 1 and recovers only the first principal component. More generally, when we wish to recover a basis of principal components, the matrix D is given by the l eigenvectors corresponding to the largest eigenvalues. This may be shown using proof by induction. We recommend writing this proof as an exercise.
This may be shown using proof by induction. - Я вообще не понимаю как. Сами пишут в начале поораграфа что нам достаточно только того что описанно в книге в разделе линейной алгебры:
> One simple machine learning algorithm, principal components analysis or PCA can be derived using only knowledge of basic linear algebra.
Ага блин, тут я решил погуглить и оказывается кто-то уже задавался похожим вопросом:
https://math.stackexchange.com/questions/2404126/linear-algebra-principal-component-analysis-optimization
Так там в ответах такой матан, шо капец. Весь запал аж пропал, наверное буду дальше сидеть писать интепрайзщину на жава. А этот ваш диплерниг, для сверхлюдей.
Аноним 30/06/20 Втр 02:36:09 173746370
>>1737462
Раздел: 2.12 Example: Principal Components Analysis
Аноним 30/06/20 Втр 02:37:09 173746471
>>1737462
Ну ты почитай про собственные значения и собственные векторы. Поищи примеры кода.
Аноним 30/06/20 Втр 02:37:51 173746572
>>1737390
> голосовой помощник
А, ну это понятно. Скоро мода на чатботов пройдёт, ещё куча нлпхеров на морозе окажется. А вообще это кризис просто.
Аноним 30/06/20 Втр 12:19:34 173770473
>>1737462
>Сами пишут в начале поораграфа что нам достаточно только того что описанно в книге в разделе линейной алгебры:
Нет, там такого не написано. Там написано "can be derived using only knowledge of basic linear algebra." - может быть выведен только со знаниями линейной алгебры. Это необходимое условие, а не достаточное. Школьные олимпиадные задачи по математике могут быть решены вообще только с помощью школьной программы, но это не значит, что лично ты быстро решишь какую-нибудь задачу для седьмого класса. Для 11 ты вообще не решишь.

Навскидку, тут нужно знать, что
a' b - это скалярное произведение векторов a и b
d' d - это квадрат длины вектора d
d'd = 1 означает, что вектор d единичный
X'X - очень часто встречающаяся конструкция, которая образует симметричную матрицу. Это ключевой момент вообще. У симметричной матрицы собственные векторы образуют базис, то есть ты любой другой вектор можешь расписать как сумму этих самых векторов
Более того, это ортонормированный базис, то есть скалярное произведение в нем можно посчитать как сумму произведений коэффициентов при базисных векторах

В итоге симметричность матрицы и знание ее собственных векторов позволяет заменить муторное умножение матрицы на вектор умножением скаляра на вектор. Используется в линале повсеместно, потому что весь линал пляшет вокруг того, как бы избавиться от сложных формул типа матричных произведений и перейти к простым.

Мое решение похоже на второе решение чувака с ответом, искал я его довольно долго, потому что перечисленные мной факты сверху я не помнил нихуя.
Расписываем вектор d по базису из собств. векторов:
d = a1 v1 + a2 v2 ...
Умножаем матрицу A=X'X на d:
d_new = A d = A (a1 v1 + a2 v2 + ...) = a1 A v1 + a2 A v2 + ... = a1 lambda1 v1 + a2 lambda2 v2 + ...

То есть d' A d = d' d_new скалярное произведение между d и d_new

В общем, мы свели задачу к тому, что у нас есть 2 вектора
d = a1 v1 + a2 v2 + ...
d_new = lambda1 a1 v1 + lambda2 a2 v2 + ...
и нужно максимизировать их скалярное произведение. Так как базис v ортонормированный, то можно просто перемножить коэффициенты

d' d_new = lambda1 a1^2 + lambda2 a2^2 + ...

То есть имеется набор коэффициентов a, при этом a1^2+a2^2+a3^2+...=1, и нужно подобрать такие a, чтобы максимизировать функцию. Это уже школьная задача - то есть достаточно школьной математики, при этом понятно, что большинство школьников ее не решит.

Для случая двух векторов доказывается элементарно, нужно подставить a1^2=1-a2^2, потому что d'd=1 => a1^2+a2^2=1. Возникнет парабола либо с максимумом в точке a1=0 a2=1, либо с максимумом в точке a1=1 a2=0.

lambda1 a1^2 + lambda2 a2^2 = lambda1 a1^2 + lambda2 (1 - a1^2) = lambda2 + a1^2(lambda1-lambda2)
lambda1 a1^2 + lambda2 a2^2 = lambda1 (1 - a2^2) + lambda2 a1^2 = lambda1 + a1^2(lambda2-lambda1)
Какое из двух выражений выбрать зависит от того, lambda2>lambda1 или lambda1>lambda2. Потому что если при квадрате отрицательный коэффициент, это значит, что значение a-bx^2 больше чем a быть не может. А значит это и есть максимум, главное убедиться при этом, что a1^2+a2^2 = 1.

Для случая трех чуть посложнее, но зная случай для двух понятно, что тут делать

lambda1 a1^2 + lambda2 a2^2 + lambda3 a3^2 =
lambda1 a1^2 + lambda2 a2^2 + lambda3 (1 - a1^2 - a2^2) =
lambda3 + a1^2 (lambda1 - lambda3) + a2^2 (lambda2 - lambda3)
Положим lambda3>lambda2>lambda1. Тогда lambda1 - lambda3 - отрицательная величина, lambda2-lambda3 - тоже. Значит больше, чем lambda3 это выражение быть не может, а равно lambda3 оно при a1=0, a2=0.
Если lambda2>lambda3>lambda1, то просто подставляем не a3, а a2.

В итоге получается что d равно чему-то типа d = 0 v1 + 0 v2 + 1 v3 = v3, то есть собств. вектору с максимальным собств. числом
Аноним 30/06/20 Втр 13:30:18 173778374
>>1737704
> XTX - очень часто встречающаяся конструкция, которая образует симметричную матрицу.
Блин я подозревал, надо было не лениться и проверить. Короче мне ещё с этим ещё неделю разбираться.
Аноним 30/06/20 Втр 13:37:26 173778675
>>1735054
Даже тут это говно, со всех щелей лезут, игры, книги, фильмы, ДАТАСЕТЫ.
Аноним 30/06/20 Втр 14:47:49 173784276
>>1737786
А ты шо думал. Я так смеялся, когда читал срачи на тему необходимости удалить долю цветных от населения района как фичу в датасете бостонской недвижимости в scikit-learn (точнее там был показатель, рассчитанный на её основе). Мол использовать этот показатель для прогнозирования цены объекта недвижимости - расизм, даже если корреляция есть.
Аноним 30/06/20 Втр 18:39:54 173820177
Есть ли профиты для это области проходить курс по эконометрике?
Аноним 30/06/20 Втр 18:40:59 173820578
1465790774478.jpg 25Кб, 576x121
576x121
Аноним 30/06/20 Втр 18:43:38 173820779
>>1735015
>Алгоритм облажался
Не вижу чтобы алгоритм ображался. Задача алгоритма была какая, угадывать мировых политиков, или построить похожее лицо? Потому что со второй задачей он справился.
Аноним 30/06/20 Втр 18:45:58 173821180
>>1738205
Сейчас ты назовёшь нас трясунами параметрами, но при этом ты просто обиженная завидка, которая даже не может запустить тензорфлоу и отделить кошек от собак
Аноним 30/06/20 Втр 18:46:06 173821281
>>1738207
Он из негра сделал белого, а негры не похожи на белых
Аноним 30/06/20 Втр 18:52:58 173821782
>>1738212
Он из смуглого, лопоухого, бровастого, губастого сделал смуглого, лопоухого, бровастого, губастого. Вот я смотрю на картинку и мой человеческий мозг видит что она произведена из нее, очень похожа. Могла быть произведена другая картинка, с негром, в этом и есть суть такого генератора. Она не обязана была вопроизводить именно Обаму.
Аноним 30/06/20 Втр 18:53:53 173822083
>>1738211
Это наоборот комплимент же, мнение советского конструктора ракет, Протона.
Аноним 30/06/20 Втр 18:54:35 173822284
>>1738211
Один раз смог запустить, но память быстро кончилась.
Аноним 30/06/20 Втр 18:54:58 173822485
>>1738220
Надо будет в следующую шапку добавить
Аноним 30/06/20 Втр 18:56:20 173822886
>>1738217
Да, это характерный момент - кто больший растист, алгоритм, или тот хер, который возмущается, что из пиксельного негра не делают негра по закону "одна капля негритянского пикселя".
Аноним 30/06/20 Втр 19:04:59 173824087
>>1738211
У треда ПТСР от действий нечеткого петуха
Аноним 30/06/20 Втр 19:17:34 173825488
>>1738205
Кстати, а есть исследования няронок с точки зрения теории устойчивости?
Аноним 30/06/20 Втр 19:26:40 173826889
>>1738254
В прошлом треде вроде об этом было. Если свести нейронку к ОДУ, можно проанализировать получившееся ОДУ на предмет устойчивости. В частности, это дает новые варианты регуляризации
Смотри совместные Ruthotto и Haber
https://arxiv.org/pdf/1705.03341.pdf
https://arxiv.org/pdf/1804.04272.pdf
Аноним 01/07/20 Срд 03:58:29 173860290
Как в jupyter разрешить доступ только к одной директории в github, а не ко всем, как это делает этот сервис
https://nbviewer.jupyter.org/
Аноним 01/07/20 Срд 04:02:49 173860491
>>1738602
Не то. Короче, как в jupyter сделать access только к одной директории?
Аноним 01/07/20 Срд 06:12:34 173862792
ребят, а у кого-нибудь есть конфа, где люди общаются и обмениваются знаниями по DS и МашОб? если есть, то очень хотел бы на нее взгянуть, а то без единомышленников совсем что-то делать уже не хочется, кажется, что я один в эти дебри полез.
Аноним 01/07/20 Срд 07:55:44 173863893
Аноним 01/07/20 Срд 08:18:24 173864394
>>1738638
спасибо конечно, но я читаю ОП-треды, туда уже подал давно, жду
Аноним 01/07/20 Срд 14:57:54 173894795
Никто не подскажет можно ли в реддите на просмотре ленты одного канала поставить минимальное кол-во лайков, ниже которого скрывать всю срань? На канале из оп-поста по 10 постов в сутки, и почти все говно. Всё, что ниже 200 лайков, можно просто игнорировать, скрывать и идти дальше
Аноним 01/07/20 Срд 15:34:46 173899796
>>1738947
Выбери top, затем, например, past week
Аноним 01/07/20 Срд 15:38:44 173900397
Сейчас зашел в одс, там опять вкатывальщиков привалило. Смеюсь с 40 летних инженеров, студентоты всяких говновузов без номральной мат подготовки и прочего скама. И все как один проходят эти сраные курсы и думают, что кому-то будут нужны.
Аноним 01/07/20 Срд 15:54:33 173902398
Как записать в csv файл значения с плавающей точкой в виде 9.345 а не 9.34578945е2 ?
Если округлять, то последние значащие цифры просто становятся нулями, но формат записи остается такой же.
Аноним 01/07/20 Срд 16:04:15 173904799
>>1739023
Ты тредом не ошибся? Чем именно ты csv пишешь?
Аноним 01/07/20 Срд 16:06:09 1739050100
Аноним 01/07/20 Срд 16:14:19 1739066101
>>1739023
Только 9.34578945е2 это 0.09435 а не 9.345
Мошонлёрнеры, блядь
Аноним 01/07/20 Срд 16:52:31 1739125102
1018056523.jpg 124Кб, 476x650
476x650
Начал читать пикрил, но теперь зашёл в тред, прочитал шапку. Стоит ли перейти на "Глубокое обучение на Python" Шолле или какую-то другую книгу из шапки? Знаний МЛ нет, какие-никакие знания матана, линейной алгебры и теорвера есть.
Аноним 01/07/20 Срд 16:52:54 1739126103
>>1739047
Не ошибся, я же датасет готовлю. Пишу питоном.
>>1739050
Если б работал round, я бы не спрашивал.
>>1739066
Да я вообще не смотрел цифры, вообще думал 9375хуй45залупа написать
Аноним 01/07/20 Срд 16:55:14 1739130104
Аноним 01/07/20 Срд 16:55:51 1739132105
>>1739126
>Если б работал round, я бы не спрашивал
Ванг нет, покажи код.
Аноним 01/07/20 Срд 17:55:06 1739201106
>>1739126
>Не ошибся, я же датасет готовлю. Пишу питоном.
Каким блядь нахуй питоном, сука, какие же тупни тупые, реально считают, что все должны вангами работать
Аноним 01/07/20 Срд 18:08:26 1739215107
15910950655220.png 136Кб, 540x465
540x465
>>1739201
>реально считают, что все должны вангами работать
Но ведь дата-сайен в этом и заключается.
Аноним 01/07/20 Срд 18:26:09 1739248108
15932634623380.png 479Кб, 1280x720
1280x720
Аноним 01/07/20 Срд 19:52:33 1739336109
4hNLUMDKn6A.jpg 227Кб, 795x383
795x383
>>1739132
Ну как-бы вот
dt = np.round(dt,2)
Результат на пикриле.
>>1739201
Ну не стукай.
Аноним 01/07/20 Срд 19:53:06 1739338110
Аноним 01/07/20 Срд 19:57:46 1739340111
dt = np.round(dt,2)
np.savetxt('1.csv', dt, delimiter=",")

вот так у меня в файл пишется. сорян что я тут тред засрал немного
Аноним 01/07/20 Срд 20:01:47 1739347112
image.png 27Кб, 773x369
773x369
Аноним 01/07/20 Срд 20:03:28 1739348113
>>1739340
>>1739347
А, понял. Ты неправильно сохраняешь - используй dt.to_csv.
Аноним 01/07/20 Срд 20:13:34 1739357114
>>1739348
Спасибо, заработало.
Аноним 02/07/20 Чтв 00:18:02 1739535115
Аноним 02/07/20 Чтв 20:06:08 1740098116
>>1734710 (OP)
>>1733222 (OP)
Суп народ

Есть одно тз:
https://docs.google.com/spreadsheets/d/1LFknKlNyarjpAwb5jm-9ZOHyi3zaXt-cadAUo39MSnA/edit?usp=sharing

Тут очевидно про звук что то. Что означают числа в столбце F - я хз.
Подскажите, от чего отталкиваться, чтобы найти особенности в данных? На что обратить внимание, что сделать в первую очередь?
Аноним 02/07/20 Чтв 20:19:53 1740113117
>>1740098
snr - signal to noise ratio, остальное не понятно
Аноним 02/07/20 Чтв 21:29:23 1740172118
>>1740098
CC это, возможно, component carrier
Просто идентификатор некоторого диапазона частот
Аноним 02/07/20 Чтв 22:25:31 1740228119
>>1740098
>>1740113
>>1740172

TS (от англ. Time-Slot) — единица разделения канала в системах связи, где применяется множественный доступ с разделением по времени (TDMA) или временное уплотнение (мультиплексирование) (TDM).

снр это сигнал/шум

сс - это либо кариер, либо какая то фигня для оценки безопасности

С этим вроде +- понятно. А вот что там можно проанализировать нифига непонятно >_<
Аноним 02/07/20 Чтв 22:57:50 1740244120
>>1740228
Ну блядь статистики своих чиселок там понаходи, распределения, корреляции, попробуй что-нибудь по чему-нибудь попредсказывать
Аноним 02/07/20 Чтв 23:57:12 1740309121
>>1740228
Если непонятно, начни с проецирования PCA на плоскость или пространство по случайным переменным и посмотри, не образуются ли паттерны
Аноним 03/07/20 Птн 09:07:20 1740456122
1473993837001.jpg 208Кб, 1063x1200
1063x1200
Сап, программач. Хочу запилить чатбота на питоне. Имею для обучения JSON-файл с готовыми парами "вопрос-ответ", которые нейронка должна воспроизводить максимально точно. Что можно использовать для обучения с учителем? Есть ли уже готовые проекты или библиотеки с максимально быстрым вкатом? Просьба в гугл не посылать, мне интересен именно опыт людей, реально работавших с такой задачей.
Аноним 03/07/20 Птн 09:36:21 1740466123
Аноним 03/07/20 Птн 10:23:18 1740481124
154169023811305[...].jpg 65Кб, 700x417
700x417
Аноним 03/07/20 Птн 17:55:27 1740938125
А есть что-то типа списка нерешенных проблем ML? Открытых вопросов и т.п. Курсовую/диплом по чему можно писать? Просто для меня ML стало ремеслом, которым зарабатывают деньги.
Аноним 03/07/20 Птн 18:01:20 1740946126
>>1740938
Заходишь на кэгл и ебешься.
Аноним 03/07/20 Птн 18:02:13 1740947127
>>1740946
Я не про это. Я про теорию.
Аноним 03/07/20 Птн 18:05:31 1740951128
>>1740947
unsolved problems in machine learning
гугл ит
Аноним 03/07/20 Птн 22:21:02 1741189129
>>1740938
>Просто для меня ML стало ремеслом, которым зарабатывают деньги.
А ты гречневый что ли и зарплатных презираешь?
Аноним 03/07/20 Птн 22:41:08 1741207130
>>1740938
Спроси нечеткого, он тебе подкинет задачек
Аноним 03/07/20 Птн 22:56:29 1741216131
300px-HideThePa[...].jpg 33Кб, 300x254
300x254
>>1736550
>В правильном софте ничто никуда не лезет
Вот это от души просто, всё так и есть.
Аноним 03/07/20 Птн 22:57:37 1741217132
вопрос про reinforcement learning: что делать, если последствия твоего действия наступают через несколько шагов? Вот ты сейчас сделал ход, а случилось что-то только через N ходов. У меня первая идея это сохранять свой ход и отдавать его в следующие фичи. То есть фича "сколько шагов назад вы сделали ход попрыгать на одной ноге" и хранить там кол-во шагов, где 1 это максимальное интересующее меня значение (и бесконечность/никогда в том числе), а 0 это "сделал на прошлом ходу"
Аноним 04/07/20 Суб 00:19:20 1741254133
>>1741217
сейчас задумался и пришел к выводу, что в этом случае придется как-то определять влияние между действием A, временным последствием B и конечным следствием C. Причем придется понимать, что С вышло из B, а то вышло из A.

Сейчас придумал альтернативное решение: сделать ход и сразу же определить коэф полезного действия, заглянув таймлапсом в будущее с логикой "следующие N ходов я ничего не делал". То есть:
1. Действие в полночь: пнуть конкретную балку башни Эйфеля. Следствие в течение следующих 24 часов: Башня развалилась. +100 баллов КПД
2. Действие в полночь: ничего не делать. Следствие в течение следующих 24 часов: Башня как стояла так и стоит. +0 баллов КПД
3. Действие в час ночи: пнуть конкретную балку башни Эйфеля. Следствие в течение следующих 24 часов: Башня развалилась. +100 баллов КПД
4, Действие в час ночи: ничего не делать. Следствие в течение следующих 24 часов: Башня как стояла так и стоит. +0 баллов КПД

И так далее. Машина соответственно поймёт связь между пинком и падением башни. Возможность заглянуть в будущее у меня имеется.
Аноним 04/07/20 Суб 00:47:46 1741259134
>>1741217
>что делать
Для начала, прежде чем разводить философию, почитать какую-нибудь книжку по rl
Аноним 04/07/20 Суб 01:40:43 1741272135
Че думаете по поводу этой хуйни https://www.artlebedev.ru/ironov/process/ ?
У меня почему то сильное чувство что это какая-то хуетень
Аноним 04/07/20 Суб 02:50:36 1741280136
>>1741272
> почему то сильное чувство что это какая-то хуетень
> artlebedev
> почему то сильное чувство что это какая-то хуетень
> artlebedev
> lebedev
В роликах про конституцию тоже искусственный интеллект снимался, не бейте
Аноним 04/07/20 Суб 09:18:38 1741326137
>>1741272
Дли нейронок самое то, на большее они не способны
Аноним 04/07/20 Суб 11:30:22 1741402138
Аноним 04/07/20 Суб 11:39:05 1741407139
>>1741402
У меня криндж от ваших нейронок.
Аноним 04/07/20 Суб 14:35:38 1741634140
Тренирую модель, которая выводит два численных значения. Потери уменьшаются, все хорошо, но accuracy всегда равна единице и на тренировочном, и на тестовом сете. ЧЯДНТ?

ann = tf.keras.models.Sequential()
ann.add(tf.keras.layers.Dense(units=20, activation='sigmoid'))
ann.add(tf.keras.layers.Dense(units=2))

ann.compile(optimizer = 'sgd', loss = 'mean_squared_error', metrics = ['accuracy'])
ann.fit(X_train, y_train, batch_size=32, epochs = 400)
test_loss, test_acc = ann.evaluate(X_test, y_test)
Аноним 04/07/20 Суб 14:38:13 1741638141
>>1741634
Почему ты используешь accuracy?
Аноним 04/07/20 Суб 15:04:48 1741671142
>>1741638
Идея была проверить как часто предикции совпадают с истинными значениями. Но в таком случае акьюраси должна вообще быть 0, ведь там же не округленные числа выводятся.
Мне кажется мне нужно стоит mean absolute percentage error использовать.
Аноним 04/07/20 Суб 17:43:21 1741906143
>>1741671
>>1741634
Мой вердикт: ты не понимаешь, что делаешь.

В случае модели с несколькими выходами accuracy - это класс CategoricalAccuracy. Она воспринимает то, что ей отдают, как вектора вероятностей классов, но плевать хотела, что на самом деле ей поступает - она примет любые два вектора одинакового размера. Она ищет, где максимум у первого вектора (y_true), и проверяет, максимум ли на той же позиции у второго вектора (y_pred). Если да, то ставит "да, совпало, +1 к счётчику". Ей плевать, вероятности там или нет.

Керас всё стерпит, ему похуй, лишь бы ошибок с вычислительной точки зрения не было. Сделать так, чтобы вычисления, которые он производит, были осмыслены - твоя задача.
Аноним 04/07/20 Суб 23:51:25 1742148144
>>1741634
>Тренирую модель, которая выводит два численных значения. Потери уменьшаются, все хорошо, но accuracy всегда равна единице и на тренировочном, и на тестовом сете. ЧЯДНТ?
Скорее всего ты забыл преобразовать y_train и y_test с помощью keras.utils.to_categorical.
Аноним 05/07/20 Вск 03:50:17 1742225145
>>1741634
accuracy precision recall f1 это все метрики для классификации, а не регрессии
Аноним 05/07/20 Вск 05:53:31 1742239146
15921035710820.gif 391Кб, 652x562
652x562
> зумер вкатывальщик использует метрики для классификации в задаче регрессии потому что не знает в чем разница
> кок пок пачиму accuracy = 1
Ну что, как вкатились, тайдмены?
Аноним 05/07/20 Вск 06:29:38 1742245147
>>1742239
Нечеткий петух при сложном вопросе:
ко-ко-ко меня здесь нет
Нечеткий петух при вопросе новичка:
Вот вы зумеры тупые, а я умный, а вы тупые, ха-ха-ха, зумеры тупые зумеры
Аноним 05/07/20 Вск 07:08:06 1742248148
15924015117680.png 94Кб, 400x344
400x344
>>1742245
> Нечеткий петух при сложном вопросе:
> ко-ко-ко меня здесь нет
> Нечеткий петух при вопросе новичка:
> Вот вы зумеры тупые, а я умный, а вы тупые, ха-ха-ха, зумеры тупые зумеры
Аноним 05/07/20 Вск 07:20:54 1742250149
С какой книги лучше начать? Deep Learning Book мне не подошла.
Аноним 05/07/20 Вск 09:27:47 1742272150
>>1742250
ISLR читай. Хотя бы общее представление будет, о чем вообще машоб. Может быть даже не будешь путать регрессию с классификацией.
Аноним 05/07/20 Вск 09:53:20 1742277151
>>1742248
Этот трясун порвался
Аноним 05/07/20 Вск 09:57:48 1742279152
>>1742272
Почему нет какого-то единого roadmap'а. Куда не зайдешь, каждый лезет всучить свои сомнительные курсы и книги. Уже несколько дней не могу определиться, откуда начинать. Я планировал сразу окунуться в машинное обучение, а как только понадобится математика, то приступить к ней
Аноним 05/07/20 Вск 10:21:32 1742283153
>>1742279
Да откуда нравится, оттуда и начинай. Какая разница?
Аноним 05/07/20 Вск 11:14:32 1742321154
>>1742279
> Почему нет какого-то единого roadmap'а.
Тема слишком широкая. Даже в 90е одной книгой охватить было нереально, тот же Хайкин как пример такой попытки.
Аноним 05/07/20 Вск 11:28:25 1742333155
>>1742279
>Почему нет какого-то единого roadmap'а
Есть, но он ведет на хуй. Нейроговно не нужно.
Аноним 05/07/20 Вск 11:36:02 1742341156
>>1742239
Причем здесь зумер-не зумер?
Аноним 05/07/20 Вск 11:40:28 1742346157
>>1742341
Это психдеформация матанопетухов
Аноним 05/07/20 Вск 14:36:15 1742499158
>>1742341
> Причем здесь зумер-не зумер?
Эмпирически было выявлено, что в массе своей авторы наиболее тупых вопросов - зумера. Поэтому по умолчанию вкатывальщик считается зумером.
Аноним 05/07/20 Вск 15:23:06 1742531159
>>1742279
>Почему нет какого-то единого roadmap'а
Потому что тем кому нужен какой-то единый роадмап он на самом деле не нужен: можно просто не тратить время и сразу забить, у них всё равно ничего не получится.
Аноним 05/07/20 Вск 18:06:15 1742717160
>>1742346
Еще бы нечеткий петух понимал что-то в матане
05/07/20 Вск 18:12:40 1742720161
>>1741906
> Сделать так, чтобы вычисления, которые он производит, были осмыслены - твоя задача.
Вот в этом и есть ваша проблема питухона с егоной динамической кококзацией. Нормальный язык бы просто не позволил всунуть вектор не того типа.
Аноним 05/07/20 Вск 18:15:01 1742722162
А в машоб поздно вкатываться?
Мне кажется, что уже нереально будет сделать что-то реально новое, что бы пробиться в круг топ экспертов.
Аноним 05/07/20 Вск 18:56:12 1742762163
>>1742722
тут и освоить все сложно уже
Аноним 05/07/20 Вск 18:57:34 1742764164
>>1742722
>что-то реально новое
Сделай что то рабочее, этого достаточно.
Аноним 05/07/20 Вск 18:58:31 1742765165
>>1742722
>что бы пробиться в круг топ экспертов.
Самый ебанутый тред. В остальных тредах люди просто работают и обсуждают что-то, в МЛ-треде если ты не топ оф да топ, нахуй это нужно вообще.
Аноним 05/07/20 Вск 19:12:30 1742784166
>>1742765

Говеокод5оки кодят за похлёбку, а мы - Наука! Учёные, ебать!
05/07/20 Вск 19:28:48 1742806167
>>1742720
Ты же не понимаешь, про что пишешь.
Аноним 05/07/20 Вск 19:50:39 1742825168
>>1742765
>в МЛ-треде если ты не топ оф да топ, нахуй это нужно вообще
Потому что деньги платят только топам.
Аноним 05/07/20 Вск 20:54:14 1742867169
>>1742720
Ладно, кретин, перевожу на доступный тебе язык:
>>1741634: у меня алгоритм Дейкстры кратчайший путь не находит
>>1741906: алгоритм Дейкстры работает только с неотрицательными рёбрами, за этим должен следить ты сам
>>1742720: Вот в этом и есть ваша проблема питухона с егоной динамической кококзацией. Нормальный язык бы просто не позволил подать на вход граф с отрицательными рёбрами.
Аноним 05/07/20 Вск 21:28:13 1742882170
>>1742717
Настоящая математика это переладывание палочек!
Аноним 05/07/20 Вск 21:33:15 1742887171
Аноним 05/07/20 Вск 22:41:43 1742927172
15890904754150.jpg 93Кб, 1280x964
1280x964
>>1734710 (OP)
Аноны, опытные и не очень, работающие датасатанистами или стремящиеся, кто-нибудь из вас снизойдёт побыть ментором по нейросетям? Или если есть какой пет-проект с машобом, можно ли поучаствовать или организовать? Кагглы, боюсь, тупиковая ветвь развития.
Аноним 06/07/20 Пнд 01:17:23 1743011173
Есть учебники по старому nlp где описываются типичный feature extraction, кроме bow и tf-idf ?
Аноним 06/07/20 Пнд 13:46:12 1743141174
Аноним 06/07/20 Пнд 17:08:02 1743255175
>>1743141
Это вопрос по тому, что имеется, или по тому, что хочу приобрести?
Если первое, то имеется некоторый опыт с рекуррентными, свёрточными и малость с генеративными сетями.
Если второе, то да.
Аноним 06/07/20 Пнд 17:58:44 1743299176
Аноним 07/07/20 Втр 09:10:13 1743590177
>>1743299
Спасибо.
А есть фейкопочта? Телеграмма нет
Аноним 07/07/20 Втр 11:38:57 1743674178
>>1743590
2k20, нет тг даже на фейке
Пиши:
somuchkindof2ch@gmail.com
Аноним 07/07/20 Втр 12:42:51 1743747179
>>1743674
>2k20, нет тг даже на фейке
ТруЪ ананимас же.
>Пиши:
Написал.
Аноним 07/07/20 Втр 23:06:36 1744454180
>1743011
manning information retrieval или jurafsky speech and language processing
Аноним 08/07/20 Срд 00:04:50 1744480181
Че пацаны, устроились джунами или хотя бы трейни? Я вот сдела 2 тестовых, прошел 3 собеса и меня готовы взять на джуна и на мидла ДС в ДС каламбур. Из опыта, разумеется только один свой проект. Как же хорошо, что я отучился в ШАДе год.
Аноним 08/07/20 Срд 00:09:40 1744482182
Аноним 08/07/20 Срд 00:11:12 1744483183
>>1744482
На джуна чуть меньше 150к после налогов должно быть, но там задачи интересные. Мидлу 170-200, там еще оффер не пришел, но там задачи хуже.
Аноним 08/07/20 Срд 00:16:35 1744486184
>>1744483
Пиздато. А я траил в яндекс, макензи даже не на джуна, а на стажера и в обоих случаях не прошел. В итоге стажорствую в области не связанной с машинкой. Ну ты раз в шаде год значит жестко шаришь в материале.
А проект крутой? В соло делал?
Аноним 08/07/20 Срд 01:47:22 1744540185
>>1744483
>На джуна чуть меньше 150к после налогов должно быть, но там задачи интересные. Мидлу 170-200
Пиздос. В других областях 150к платят сеньорам.
Аноним 08/07/20 Срд 07:23:26 1744614186
>>1742887
машобисты, когда задали вопрос по тематике:
меня здесь нет

машобисты, когда тайдмен насрал боевыми аватарками:
ну тупой нечеткий петух ну тупой
Аноним 08/07/20 Срд 10:08:02 1744724187
>>1744483
Молодец. ШАД - сила, что бы тут обиженка не писал.
Аноним 08/07/20 Срд 10:13:11 1744734188
>>1744724
> ШАД - сила,
Покажи хоть одного шадовца в кремниевой долине, хоть один взлетевший стартап, сделанный шадовцем, хоть один что-то значащий для предметной области пейпер, написанный шадовцем хотя бы в виде соавтора. В чем конкретно проявляется сила этих инфоцыганей?
Аноним 08/07/20 Срд 11:36:30 1744827189
Аноним 08/07/20 Срд 11:57:50 1744851190
>>1744734
Ты пытаешься сыграть на том, что всем лень копаться в карьерах выпускников? Жестка.
Аноним 08/07/20 Срд 13:31:34 1744927191
Screenshot180.jpg 156Кб, 935x1117
935x1117
А, я забыл. тут же у нас /PR/
Задроты реально не хотя коммуницировать и разбираться.
Принесите им датасеты и может быть они подберут нейроночку.

Серьезно? Вы так видите свою миссию ?
Аноним 08/07/20 Срд 13:33:47 1744930192
>>1744927
Но это тред мл, а не дата анализа. Для дата инженеринга есть тред бд.
Аноним 08/07/20 Срд 13:37:33 1744933193
>>1744930
вот как раз иллюстрируешь свой отрыв от реальности этими словами. А тред БД морально устарел.

Разве есть более подходящий тред?
Аноним 08/07/20 Срд 13:40:33 1744941194
Аноним 08/07/20 Срд 13:41:10 1744942195
>>1744933
> вот как раз иллюстрируешь свой отрыв от реальности этими словами
Какой отрыв? Дата анализ это очень много чего, включая даже создание отчетов в экселе. Но тред то конкретно про машинное обучение. Никто не занимается всем вместе сразу.

> А тред БД морально устарел.
Почему?
Аноним 08/07/20 Срд 13:41:25 1744943196
Аноним 08/07/20 Срд 13:50:16 1744952197
>>1744942
ну потому что .
Ты что, разве обучальщик машин в вакууме? такая работа вообще существует? Разве тебе не попадают задачи где нет ТЗ ?

>> А тред БД морально устарел.
>Почему?
они там до сих пор обсуждают правое и левое соединение и азы sql. Довольно скучно.
Аноним 08/07/20 Срд 19:32:40 1745303198
>>1744952
Но это и есть твой уровень, видимо. ИТТ срали на твой бизнес и хадуп.
Аноним 08/07/20 Срд 21:15:42 1745354199
>>1745303
При этом рисуют Обаму и раздевают анимешных девочек.

Ну ладно.
Я обязательно вкачусь и вкачу бизнес и без вас.
Аноним 08/07/20 Срд 22:14:29 1745385200
>>1744927
Какой феерический мудак, лол.
08/07/20 Срд 22:19:06 1745391201
>>1744734
Пфф, покажи мне хоть одного уроженца России в Кремниевой долине не на должности макаки-набивальщика.
Аноним 08/07/20 Срд 22:30:41 1745408202
>>1744734>>1745391
Пиздец вы маньки с провинциальными комплексами конечно
Аноним 09/07/20 Чтв 02:20:22 1745584203
>>1745408
А может это ты лоходей, верующий, что какие-то инфоцыгане приведут тебя к успеху?
Аноним 09/07/20 Чтв 09:56:07 1745665204
Аноним 09/07/20 Чтв 10:41:16 1745696205
>>1745665
У вас в мл не педики есть?
Аноним 09/07/20 Чтв 11:03:14 1745712206
1296712632977.png 168Кб, 600x600
600x600
09/07/20 Чтв 11:42:46 1745729207
Аноним 09/07/20 Чтв 11:43:18 1745730208
>>1745712
>матеша
>педики
Я всегда подозревал
Аноним 09/07/20 Чтв 11:44:34 1745731209
>>1745729
>Ульяновска
Упс, пропустил
Аноним 09/07/20 Чтв 20:42:15 1746320210
>>1745665
>не макака-набивальщик
>игростудия трипл эй говна для детей
понимаешь в чем ты проебался?
Аноним 10/07/20 Птн 00:23:44 1746490211
>>1744927
Да.
Разумеется, кабанчики из бизнеса видят мою миссию несколько иначе - чтобы я и предметную область досконально знал, и выборку сам собрал, и с бизнесом договорился, и инфраструктуру настроил, и модели обучил, и интегрировал в готовый продукт, и всё это забесплатно и ещё вчера - но мне похуй, что хотят кабанчики.
Аноним 10/07/20 Птн 07:21:50 1746570212
>>1746490
да бля, тыж программист
Аноним 10/07/20 Птн 07:48:57 1746572213
Аноним 10/07/20 Птн 08:18:32 1746574214
>>1746490
а деньги кто тебе платит?
Аноним 10/07/20 Птн 08:21:22 1746575215
>>1746572
У вас не педики есть?
Аноним 10/07/20 Птн 09:00:39 1746586216
>>1746574
Тот, кто может позволить себе зарплаты в ML, очевидно же. В рашке это либо крупные конторы, либо бодишопы со средним/крупным западным клиентом.
Аноним 10/07/20 Птн 09:04:17 1746588217
>>1746586
ты же понимаешь, что это ненадолго и этих денег на всех не хватит.
выпускников со знанием статистики примерно 10000 каждый год в России и все они тебя легко заменяют.
Аноним 10/07/20 Птн 09:21:19 1746601218
>>1746588
>со знанием статистики примерно 10000
А они не составили статистику по выпускникам со знанием статистики при поступлении?
Аноним 10/07/20 Птн 09:23:05 1746603219
Screenshot183.jpg 23Кб, 810x174
810x174
>>1746586
это ведь ты в соседнем треде работу ищешь?
Аноним 10/07/20 Птн 10:35:06 1746657220
>>1746572
Какой же пиздатый чел.
Аноним 10/07/20 Птн 10:36:53 1746660221
>>1746588
>ты же понимаешь, что это ненадолго и этих денег на всех не хватит.
Это рашкокабанчики ненадолго и скоро все сдохнут от пыняномики, останутся только крупные работодатели. А в мире денег достаточно. Они их вообще печатают.
>выпускников со знанием статистики примерно 10000 каждый год в России и все они тебя легко заменяют.
Разве что тех, у кого был хоть какой-то курс тервера. Понимает что-то каждый десятый из тех, у кого был подобный курс, добавь в этот суп сносное умение программировать, никсы, английский. И получишь пригодного для дальнейшей работы джуна. Который в любой момент может свалить на смежную должность.
Аноним 10/07/20 Птн 12:11:54 1746732222
>>1746660
Сейчас школьники фильма дудя насмотрелись, жди конкурентную среду года через 4.
Аноним 10/07/20 Птн 12:17:16 1746741223
>>1746657
>Какой же пиздатый чел.
У тебя тоже встал?
Аноним 10/07/20 Птн 12:21:46 1746751224
>>1746741
yes.jpg

Ну серьезно, сасный чел. Он ещё и супер крут, собесит на сеньоров и тех лидов, сам с зп больше миллиона, на кегле тащит.
https://youtu.be/BMzvm3VNf98
Аноним 10/07/20 Птн 12:25:14 1746756225
>>1746751
Что этот педик то полезного сделал?
Аноним 10/07/20 Птн 12:28:49 1746760226
>>1746756
Сделал себя богатым.
Аноним 10/07/20 Птн 12:34:31 1746770227
>>1746756
почему педик? просто он в силу знания статистики понимает что такое регулярные занятия качалкой. Он просто выглядит как может выглядеть молодой пацан 25-30 лет регулярно занимающийся.
Аноним 10/07/20 Птн 12:44:23 1746781228
>>1746751
Пустой балабол, держись от таких подальше
Аноним 10/07/20 Птн 12:46:58 1746782229
>>1746781
Чел неймоверно богат, на вершине карьеры тех специалиста в x5. С таких очевидно надо брать пример
Аноним 10/07/20 Птн 12:51:19 1746787230
>>1746782
может ли он сам сообщить что-то полезное для достижения его уровня?
Это как слушать чемпиона по метанию, а слушать надо его тренера.
Аноним 10/07/20 Птн 12:54:24 1746789231
>>1746787
Нет такой инфы, что ты её сообщаешь и хоп ты в дамках.
А полезные вещи от него есть как например реклама одс, где многие находят работу, команду для соревнований, ревью и обсуждение статей и тд.
Аноним 10/07/20 Птн 12:56:29 1746794232
493large.jpg 45Кб, 600x600
600x600
>>1746770
>Он просто выглядит
Он выглядит как педик, неприятно для меня как мужчины короче.
>тех специалиста в x5
Так каковы его достижения как специалиста, что он сделал то?
>Чел неймоверно богат
Что про пикрил скажешь?
Аноним 10/07/20 Птн 13:16:02 1746808233
Посоны, сколько примерно уйдет времени на вкат, если я сейчас на уровне средней react макаки?
Аноним 10/07/20 Птн 13:39:30 1746825234
>>1746794
Он так-то тебя руками нахуй порвёт и на нож в конце посадит, омешкин
Аноним 10/07/20 Птн 13:41:10 1746828235
>>1746789
>Нет такой инфы, что ты её сообщаешь и хоп ты в дамках.
Сообщаю тебе такую секретную инфу: не смотри видео, где какой-то хуй час занимается самолюбованием.
Аноним 10/07/20 Птн 13:42:06 1746832236
>>1746825
Ну все, пиздец, как теперь дальше то?
Аноним 10/07/20 Птн 13:42:40 1746833237
>>1746828
>где какой-то хуй час занимается самолюбованием
Ну может те аноны на него дрочат, так что не все так плохо
Аноним 10/07/20 Птн 13:43:57 1746834238
>>1746833
Ты тоже какой-то ебнутый, в десятый раз повторяешь птушную штуку "xxx - педик гыгыгыгы"
Аноним 10/07/20 Птн 13:47:44 1746838239
>>1746794
> Так каковы его достижения как специалиста, что он сделал то?
В ретейле кстати много задач, например, предсказание спроса продуктов, расстановка в торговом зале. Он заработал на этом бизнесу миллионы долларов.

>>1746828
> Сообщаю тебе такую секретную инфу: не смотри видео, где какой-то хуй час занимается самолюбованием.
Ну вот конкретно то видео, что я скинул, это да он самоотсасывает. Ну это джаст фо фан просмотр, под фон.
Видео до этого было о том, насколько разнится понимание словосочетания "дата анализ" у работодателя. И это кстати реально ВАЖНО понимать любому итт. Есть записи и других презентаций от него, рассказывающие про полезные вещи или полезный опыт.
Аноним 10/07/20 Птн 13:52:02 1746845240
>>1746794
он заставил эту еботень работать и приносить профит. Уже этого достаточно, чтобы дать пососать всем теоретикам, которые делали чисто теоретические изыскания. Теория без практического применения- словесный онанизм. То, что им занимается достаточно много ученых- это не делает его практичней, и основная их заслуга в том, что они делятся этим знанием, а не в самом знании.
Аноним 10/07/20 Птн 13:56:42 1746853241
>>1746845
>он заставил эту еботень работать и приносить профит
Какую?
>предсказание спроса продуктов, расстановка в торговом зале
Ох бля, плановая экономика, у нас в СССР раньше целые отделы были без всякого мл говна.
Аноним 10/07/20 Птн 13:57:29 1746857242
>>1746838
>реально ВАЖНО
Дрочун, плез, всем на него пофиг
Аноним 10/07/20 Птн 14:02:43 1746868243
Аноним 10/07/20 Птн 14:06:14 1746877244
>>1746832
Как? Сидеть и не пиздеть зло на людей которые во всём лучше тебя, ещё больше завистливой жалкой пидорашкой выглядишь.
Аноним 10/07/20 Птн 14:07:58 1746883245
>>1746868
На каких работодателей? У каждого менеджера свои заебы. Ты берешь заебы конкретного манагера и делаешь выводы об индустрии.
Аноним 10/07/20 Птн 14:11:05 1746885246
>>1746883
> У каждого менеджера свои заебы
Блять. Об этом и речь. Работодатели ищут людей в спектре от делать отчеты в эксель, переобучать нейронку раз в месяц до создания корпоративного хранилища данных и всё это называют в вакансии одним словом дата саентист.
Ты бы для приличия посмотрел ролик, чтобы понять о чем тут пишут.
Аноним 10/07/20 Птн 14:12:36 1746890247
>>1746877
>Сидеть и не пиздеть зло
Пиздец ты поехавший, я его в обще первый раз увидел, какое то пафосное ноунейм чмо которое я дропнул смотреть через минуту. Если это твоя икона, то сорян, дрочи на него в одиночку.
Аноним 10/07/20 Птн 14:13:35 1746893248
>>1746885
>дата саентист
дата экселист
Аноним 10/07/20 Птн 14:18:55 1746902249
>>1746890
> пафосное ноунейм чмо
> топ100 каггла
> директор по моделированию и анализу данных в X5 Retail Group
> руководитель группой аналитики в Яндексе
> преподаватель в ВШЭ


Кто тогда не пафосное не ноунейм не чмо?
Аноним 10/07/20 Птн 14:20:52 1746904250
>>1746890
Омежка пытается состроить хорошу мину и выйти из ситуации, забавно. Это же не то чтобы ты тут на десяток постов усираешься "да ктоон такой да чё он зделол??" и своими пидорашьими шутками про геев. Небось сам его и запостил побомбить.
Аноним 10/07/20 Птн 14:24:00 1746906251
>>1746902
>ВШЭ
Это откуда лезут либирахи пачками, лол
>аналитики в Яндексе
Пиздинг с гугла а что не спиздили то делают неработоспособным говном
>X5 Retail Group
Карусель и Перекрестки массово закрываются, успех уровня /b
Пятерочка еще живет, но анализу данных, лол
Аноним 10/07/20 Птн 14:25:20 1746913252
>>1746904
Школнег, плез, всем на него похуй
Аноним 10/07/20 Птн 14:25:56 1746916253
>>1746906
Вот это отрицания пулемётом. Ты как там, нормально, пукич какич помочь зашить?
Аноним 10/07/20 Птн 14:26:58 1746918254
>>1746906
Лмао. Шиз, что ты несешь...
Аноним 10/07/20 Птн 14:27:29 1746919255
>>1746913
> мне похуй нибамбит!
> сейчас я вам его достану и специально сто постов буду объяснять что он никто и педек)) но мне похуй обсолютно!
ок
Аноним 10/07/20 Птн 14:30:38 1746920256
>>1746885
>и всё это называют в вакансии одним словом дата саентист.
И тебе нужно видео, чтобы узнать, что помимо заголовка вакансии нужно читать ее текст? Это типичная инфоцыганская вода.
У тебя главная задача - наебать работодателя, чтобы он поверил, что именно ты лучший выбор. Для этого нужно писать резюме под вакансию, всячески поворачивая то, что ты делал, именно в свете того, что написано в вакансии. Написано там будет "датасаентист с умением чесать жопу" - напишешь, что ты именно такой. А напишут что-то про докер - напишешь, что ты рожден был быть девопсом в мл. Потому что нужно подстраиваться под рынок, а не ждать, пока рынок подстроится под тебя. Менеджер - твой враг, потому что у него другая задача, он ходит на подобные эвенты, чтобы хантить лошков, чтобы они разгребали за ним говно за мелкий прайс. По этой же причине он рекламит одс как место место концентрации таких лошков, которые там добровольно сбиваются в место с дичайшей конкуренцией.
Аноним 10/07/20 Птн 14:30:46 1746921257
Аноним 10/07/20 Птн 14:32:07 1746922258
Математика = МЛ = педерастия
Аноним 10/07/20 Птн 14:33:54 1746924259
>>1746920
>наебать работодателя
Лол, местная петушня в треде еще и без работы?
Аноним 10/07/20 Птн 14:35:46 1746927260
>>1746920
Вкатывальщик ты?
Получается ты пойдешь подстраиваться под рынок и будешь писать отчеты в эксель. Нормальных спецов наоборот хантят переманивая высокой зп у конкурентов. А собес и текст вакансии могут не иметь ничего общего с тасками, которые будут на работе. Ты бы лучше реально посмотрел видос-презентацию чела, которые собесит сеньеров и тех лидов.
Аноним 10/07/20 Птн 14:37:08 1746928261
>>1746927
>собесит сеньеров и тех лидов
В Пятерочку?
Аноним 10/07/20 Птн 14:38:08 1746930262
Аноним 10/07/20 Птн 14:41:02 1746934263
>>1746930
>x5
Пятерочка
>яндекс
Беееее
Аноним 10/07/20 Птн 14:41:54 1746935264
>>1746930
>яндекс
Кстати там всегда платили ниже рынка, ты говноед?
Аноним 10/07/20 Птн 14:43:39 1746937265
>>1746838
>понимание словосочетания "дата анализ" у работодателя.
А я посмотрел и так и не понял, почему не может существовать человека, который объединял бы все три полюса треугольника?
Аноним 10/07/20 Птн 14:45:20 1746939266
>>1746934
Что не так, шиз? Какие компания для тебя норм, даже интересно

>>1746935
> Кстати там всегда платили ниже рынка, ты говноед?
Тем кого можно заменить и за кем выстроилась очередь. И то это зависит от того, как ты себя продашь. Спецов высокого уровня они сами хантят и стараются перекупить.
Аноним 10/07/20 Птн 14:46:40 1746942267
>>1746937
Потому что это слишком большой объем знаний и работы. Бизнес аналитика, дата инженериг, машинное обучение.
Аноним 10/07/20 Птн 14:49:18 1746945268
>>1746939
Хрюндель с Хуяндекса детектед
Уходи пидор, мы тебя вычислили
Аноним 10/07/20 Птн 14:49:33 1746946269
>>1746927
>Получается ты пойдешь подстраиваться под рынок и будешь писать отчеты в эксель
Это вполне нормальный путь - устроиться писать отчеты, и дальше горизонтально уже попасть в ML-отдел. Проблема в том, что манагеру такие хитрожопые нахуй не нужны. Ему нужно чтобы ты был прозрачен как стекло, чтобы, если ты охуенный, наебать тебя и продавить в зарплате, а если ты хуевый - то послать тебя нахуй. То есть он объясняет тебе, как сделать так, чтобы к нему пришло 100 таких лошков, а он бы сидел и выбирал между ними.
А я тебе объясняю, как устроиться на работу. И первое правило здесь - не слушать советы по съему женщин от женщин. Не слушай советы манагера по поводу рынка и позиционирования себя в нем.
Аноним 10/07/20 Птн 14:53:32 1746954270
>>1746946
> Это вполне нормальный путь - устроиться писать отчеты, и дальше горизонтально уже попасть в ML-отдел
Чел, это полная херня. Ты потратишь время, получая опыт который нихуя не релевантен к млю и будешь никак не отличатся от соискателей с улицы.
Я тебе как человек, который занимался дата инженеригом в консалтинге, уверяю в этом. Ты рассуждаешь как типикал вкатыватель, которому лишь бы найти работу.
Аноним 10/07/20 Птн 14:56:23 1746955271
>>1746942 почему тогда некая Кэти из Гугла (написавшая книжечку >>1744927) не считает проблемой совпадение всех навыков и ни о каких треугольниках не заикается?

Я, правда, лишь поверхностно полистал.
Аноним 10/07/20 Птн 15:01:40 1746961272
>>1746954
>Чел, это полная херня
Что херня, что двигаться в конторе горизонтально проще, чем попасть на ту же вакансию с улицы? Или что в начале надо въебывать и идти по головам, а не тупо делать таски, спускаемые сверху? Или что при поиске новой работе нужно пиздеть о том, что ты делал на старой?
Это все простая мудрость. Просто о ней не сообщают те, кому важно из ста соискателей выбрать одного. Они сами такие, нахуя им конкуренты, которые поступают так же.
Аноним 10/07/20 Птн 15:03:08 1746963273
>>1746955
Это всё зависит от погружения. В том же Макензи нет смысла брать человека, который умеет только в фит-предикт, как минимум ему придется уметь работать с базами данных - получать эффективно данные оттуда, чтобы выстроить пайплайн.
Но если у клиента таск создать КХД с нуля, то туда не отправят человека, который больше по млю. Короче суть в том, что поверхностно ты можешь знать, но это будет далеко от того, что может человек, который только этим занимается.

> не считает проблемой совпадение всех навыков
Ну я так подозреваю, что там как раз речь о том, что нет таких должностей, где ты сидишь фит предикт дрочишь.
Аноним 10/07/20 Птн 15:04:51 1746964274
Яндекс = Говно
Аноним 10/07/20 Птн 15:09:08 1746973275
Screenshot184.jpg 151Кб, 978x1152
978x1152
>>1746955
бля с Кэти немного ошибочка вышла. Непонятно в гугле она или где.
Но Раньше была Hot
Аноним 10/07/20 Птн 15:09:50 1746974276
>>1746961
> Или что в начале надо въебывать и идти по головам, а не тупо делать таски, спускаемые сверху?
Детект фраза, что ты никогда не работал.
И да нет смысл специально получать опыт работы, не связанный с областью в которой хочешь работать, ты просто потратишь время в пустую.
Аноним 10/07/20 Птн 15:10:25 1746975277
>>1746955
Потому что это не треугольник, а иерархия.
Ресерчеры - блатные.
Инфраструктура - мужики.
Аналитики - петухи.
Аноним 10/07/20 Птн 15:42:45 1747028278
>>1746974
>Детект фраза, что ты никогда не работал.
Продолжай строить манямир каждый раз как видишь на анонимной имиджборде неудобную тебе инфу. Если кто-то пишет что-то, что тебе не нравится - это неопытный школьник. Максимум - студент.
>И да нет смысл специально получать опыт работы, не связанный с областью в которой хочешь работать, ты просто потратишь время в пустую.
Ты жертва манагеров, которым нужны удобные заполнители для их вакансий, а все остальное - оверквалифаед. Это как раз охуенно поработать в разных местах. Это на одном месте ты рано или поздно упрешься в рутину, и, более того, любой корпорации это выгодно, чтобы ты был максимально специализированным винтиком, чтобы не выебывался и были проблемы перейти куда-то. Таких потом сокращают в очередной кризис и они стреляются - ведь если ты все время месил говно в одной финансовой фирме, у тебя весь путь - это месить говно в другой финансовой фирме, а кризис у них у всех одновременно.
А самому человеку наоборот выгодно быть гибким и иметь кучу побочных навыков. При этом что выстрелит ты можешь и не знать даже. То есть если у тебя кумир - манагер, то шансов стать манагером, поработав в разных местах, у тебя гораздо больше, чем если ты будешь узкоспециализированной манькой. Потому что узкоспециализированную маньку будут грузить однотипным говном, пока она это говно делает. А вот широкому спецу дорога в руководители.
Аноним 10/07/20 Птн 15:56:18 1747054279
>>1747028
Чувак, ты диванный теоретик. Имея куча мест разных работ, но по пол года, тебя выше джуна не возьмут.

> были проблемы перейти куда-то
У хорошего специалиста нет никаких проблем куда-то перейти, он может работать в любой стране мира. Потому что айти везде одно.

> А вот широкому спецу дорога в руководители
Это вещи, которые никак не связаны.
Аноним 10/07/20 Птн 16:30:22 1747095280
>>1747054
Это ведь твой пост: "А я траил в яндекс, макензи даже не на джуна, а на стажера и в обоих случаях не прошел. В итоге стажорствую в области не связанной с машинкой"?
Аноним 10/07/20 Птн 17:27:53 1747165281
Аноним 10/07/20 Птн 20:05:21 1747267282
>>1746964
>>1746945
>>1746935
>>1746934
Не переживай ты так, вот возьмёшься за ум, подучишься малясь и опять попробуешь через полгода
Аноним 10/07/20 Птн 20:10:47 1747277283
>>1746975
>Потому что это не треугольник, а иерархия.
>Инфраструктура - блатные.
>Аналитики - мужики.
>Ресерчеры - петухи.
Скорее так.
Аноним 10/07/20 Птн 20:22:54 1747299284
Аноним 10/07/20 Птн 20:24:09 1747301285
>>1747267
Ага, мечтал в Пятерочке работать, как тот кочка с видоса, лол
Аноним 10/07/20 Птн 22:03:38 1747403286
Аноним 10/07/20 Птн 22:46:17 1747461287
>>1747403
>может покритиковать?
Запросто, теоретическая параша обмазанная математикой.
Аноним 11/07/20 Суб 04:20:51 1747709288
>>1747403
Мне уже поздно такое читать. Выглядит симпатично.
11/07/20 Суб 07:23:36 1747735289
>>1746906
А что ж ты про каггл промолчал, тралль ты наш. Или ты тоже топ-100?
Аноним 11/07/20 Суб 07:26:04 1747736290
>>1746920
А потом тебя на собесе начнут спрашивать про докер, а без практики хрен ты ответишь.
Аноним 11/07/20 Суб 10:28:03 1747778291
Можно ли в Керасе как-то выдернуть удачную эпоху?
Аноним 11/07/20 Суб 10:38:59 1747781292
>>1747778
Без колобков, как диды
while yoba:
_model.fit(....., epochs=1)
_loss = model.evaluate(...)
_if loss < best_loss ....

С колобками
my_callbacks = [
tf.keras.callbacks.ModelCheckpoint(... save_best_only = True ...),
]
model.fit(dataset, epochs=10, callbacks=my_callbacks)

Аноним 11/07/20 Суб 12:11:17 1747856293
15928449181431.jpg 13Кб, 480x360
480x360
>>1747781
> __hui
> __pesda
> __jigurda___
Кто-то ещё на скобочки (((лиспа))) гонит, когда есть такой-то шидевор кринжкодинга, возведенный в ранг единственного яп для машоба индусским ПТУшниками.
Аноним 11/07/20 Суб 12:14:51 1747858294
>>1747856
Это вместо табов, если ты не понял
Аноним 11/07/20 Суб 12:26:35 1747872295
>>1747856
Питон - это то, чем должен был стать лисп, но не стал из-за того, что его испортили аутисты со своими макросами.
А синтаксис и там и там какашечка конечно
Аноним 11/07/20 Суб 19:57:20 1748442296
Сап нейросамцы! Такой вопрос:
Знаю питон, работаю в ойти (не кодером правда), хочу вкатиться в мл (единственное направление кодинга от которого дымиться шишка, на верстку интернет-магазинов по продаже айкоса или донатных даунских игр для андроида не стоит).
Такой вопрос - совместим ли как нибудь мл и фриланс? Естественно апворк и прочий бурж, а не русское говно "требуется сеньор за чебурек". Просто хочу что бы хобби хоть как то пересекалось с источником дохода.
Или не выебываться, и просто додрачивать джангу/фласк до идеала, что бы влезть с мылом между двумя фриланс-индусами?
Аноним 12/07/20 Вск 08:54:07 1748841297
>>1748442
>совместим ли как нибудь мл и фриланс?
kaggle
Аноним 12/07/20 Вск 09:55:35 1748868298
>>1748841
И где там вкладка фриланс?

Просто интересно, как местные себе представляют фриланс в ml?
Изучил данные за один вечер, решил задачу бизнеса и не стал участвовать в эксперименте, потому что у тебя уже другой заказ?

Похоже, ml до вебмакакинга не доросла. Бизнес не знает что им нужно чтобы нанимать короткими сессиями.
Аноним 12/07/20 Вск 09:58:22 1748869299
>>1748868
> Просто интересно, как местные себе представляют фриланс в ml?
Лабы делать. А стартапы это уже ближе к работе было бы.
Другого и нет.
Аноним 12/07/20 Вск 10:40:28 1748886300
>>1748868
>Просто интересно, как местные себе представляют фриланс в ml?
Работы полно. Мало у кого есть деньги содержать ML-отдел, а бизнес требует задач уровня "прикрутить распознавалку образов в сортировщике картофеля" и "добавить рекомендательную систему в интернет-магазин". ML хорошо фрилансится, потому что это замкнутые задачи - сделать датасет, добиться на нем такого-то перформанса. В итоге ты можешь собрать датасет - получить деньги, натренировать его - получить деньги, выдать программерам кабанчика predict.py и переходить на следующий проект.
Аноним 12/07/20 Вск 10:59:18 1748893301
15942510414331.gif 425Кб, 931x682
931x682
>>1748886
95% тобой описанных задач решается аутомлом. Когда каждый кабанчик это поймет, закончатся зарплаты от 100к за "импорт слесарьплов" для тайдменов вкатывальщиков.
Аноним 12/07/20 Вск 11:46:49 1748909302
>>1748886
> Работы полно. Мало у кого есть деньги содержать ML-отдел, а бизнес требует задач уровня "прикрутить распознавалку образов в сортировщике картофеля" и "добавить рекомендательную систему в интернет-магазин"
Ссылки?
Аноним 12/07/20 Вск 11:50:02 1748910303
Аноним 12/07/20 Вск 12:42:33 1748943304
>>1748893
>95% тобой описанных задач решается аутомлом.
Петуха забыли спросить. Описанные мной задачи вообще никакого ресерча не требуют, это чисто типовые задачи. Как у любой другой профессии. Электрики тоже, знаешь ли, не защищают phd перед тем, как сделать проект для очередного небоскреба. И что-то даже с появлением CAD-софта, который сильно облегчил жизнь ижненерам, сами инженеры никуда не делись. Все подобные вещи типа аутомла (который говно без перспектив) используются как раз такими, как я. То, что сами кабанчики будут обучать себе сетки это такой же манямир, как представить то, что они будут сами ремонтировать себе автомобили или лечить зубы.
Аноним 12/07/20 Вск 12:51:26 1748951305
>>1748943
> То, что сами кабанчики будут обучать себе сетки это такой же манямир, как представить то, что они будут сами ремонтировать себе автомобили или лечить зубы.
Хуя ты сравнил, лол. Лечить зубы могут только специалисты. А вот жопу подтирать или слесарьплов импортить может кто угодно.
> И что-то даже с появлением CAD-софта, который сильно облегчил жизнь ижненерам, сами инженеры никуда не делись.
Потому что CAD это автоматизация ручного труда, а машобчик более примитивных ручных аналогов не имеет.
Аноним 12/07/20 Вск 13:13:28 1748985306
>>1740098
Ну чо, анон, что получилось?
Аноним 12/07/20 Вск 14:16:25 1749092307
>>1748951
>А вот жопу подтирать или слесарьплов импортить может кто угодно.
Если же ты уверен, что любую парикмахершу можно научить хотя бы натягивать темы на вордпресс, то прими таблетки. В этом плане любую парикмахершу можно обучить стоматологии, дохуя времени просто потребуется, но айти это все равно далеко не для всех, слишком античеловеческий род деятельности.
А мл - это айти среди айти, доступно единицам, слишком много компетенций должно пересекаться. У меня знакомый в 30 лет устроился в ЕПАМ лепить круды, ему норм, потому что он такой же задрот, как любой айтишник. Но с математикой траблы - и все, приблыли, мл ему закрыт. Это не значит, что в мл требуется какая-то сложная математика, просто для большинства людей даже простая математика это сложно.
В итоге мл это примерно как какая-нибудь разработка компиляторов. Несложно сгенерить код для x86 по индусотуториалу, но это будет так же далеко от реальной разработки компиляторов, как твои представляения об МЛ. МЛ - это сплошные нюансы.

>Потому что CAD это автоматизация ручного труда, а машобчик более примитивных ручных аналогов не имеет.
Эволюция CAD выглядит так: сначала чертили на миллиметровке, потом появились 2D системы, по сути векторные редакторы, которые просто позволяли иметь элеткронный кульман с кнопкой undo, и 90% инженеров застряло на этом уровне, потом параметрические 3D системы, в которых изменение размеров детали не влекло за собой ручную переделку десятка поизводных чертежей. Затем пришел интернет, разного рода мастеры и скрипты, и многие детали вообще софтина сгенерирует по ТЗ, а вместо проектирования отдельных блоков с нуля можно найти того, кто их уже делал. При этом в теории можно все автоматизировать еще больше, но на практике держать конструктора дешевле, чем искать программиста, который автоматизирует его работу.
В ML изначально считали вручную и забивали их в железо с помощью потенциометров, затем писали программы, но с нуля, затем, пришли библиотеки типа BLAS, но градиенты считали руками, затем пришел автоматический подсчет градиентов. Каждый новый переход не упрощал вход в профессию, а усложнял.
Automl способен автоматизировать ту часть моей работы, когда я пишу скрипт с перебором параметров для сетки. Но это 2 дня в месяц максимум. Приятно, но жизнь не поменяет. Вот что было бы реально прикольно, это zero shot learning как у GPT-3.
Аноним 12/07/20 Вск 14:41:31 1749145308
>>1748886
> ML хорошо фрилансится, потому что это замкнутые задачи - сделать датасет, добиться на нем такого-то перформанса.
послушай, но ведь это и есть "хочу делать fit_predict()"

Ну ахуеть. Если я полностью сам обработал для фрилансера данные, я уж как-нибудь сам погуглю как вызвать fit_predict().

Какие-то фантазии. Это не самом деле происходит именно так?
Аноним 12/07/20 Вск 14:45:47 1749160309
Ну а как вы думаете, с чего победителям соревнований на каггле платится по 500k$ ? Потому что это дешевле чем для той же задачи создавать специальный подотдел, заводить несколько вакансий, кормить их полгода, платить налоги да ещё и после того как они задачу решат придумать им дальнейшую работу.
Аноним 12/07/20 Вск 14:48:24 1749165310
>>1749145
>Если я полностью сам обработал для фрилансера данные, я уж как-нибудь сам погуглю как вызвать fit_predict()
Вперед, каггл ждёт тебя с потенциальными миллиардами долларов, данные дают, нужно только фитпредикт сделать.
Аноним 12/07/20 Вск 14:49:42 1749167311
>>1748886
>выдать программерам кабанчика predict.py и переходить на следующий проект.

Что-то я не верю в такой формат. Точнее, не вижу достаточного объема таких задача чтобы становиться фрилансером.
Это как раз уровня automl задачи и на их решение нужно немного времени.
И ответственности никакой. с делал по ТЗ - молодец ( а ТЗ неправильное было, толку нет, денег нет)

более реально это месяцами погружаться в бизнес, создавать data pipeline, выдавать гипотезы и тестировать их на практике.
За это кабанчики готовы платить уже сейчас.
Аноним 12/07/20 Вск 14:51:17 1749174312
>>1749165
мы про выигрыш соревнований 1 раз в год или осознанный выбор области деятельности, с которым ты точно сможешь потом жить ?
Не понимаю зачем вообще Кагл упоминать в контексте обсуждения.
Аноним 12/07/20 Вск 15:24:22 1749233313
>>1749174
>мы про выигрыш соревнований 1 раз в год или осознанный выбор области деятельности
Мы про "чего это ещё я кому-то буду платить за фитпредикт, это ж легко, я и сам сделаю".
>Не понимаю
Мл не для тебя, покинь тред.
Аноним 12/07/20 Вск 15:35:49 1749263314
>>1749145
Ребенок познает мир. Мань, вот тебе несколько фактов
1. Большинство людей просто очень тупые и ленивые. Они не могут даже розетку в собственной квартире установить, хотя там достаточно школьных знаний физики и небольшого туториала
2. Те люди, которые не тупые, специализируются в узких областях. Нет смысла устанавливать 70 розеток в купленной квартире, даже если ты это умеешь, проще поручить это профи, который делает это в разы быстрее
3. Те люди, которые не тупые, и хотят развиться, например, как хобби, им требуется на это время. В практически любую нетривиальную профессию нельзя вкатиться меньше, чем за полгода.
4. Те люди, которые не тупые, хотят развиться и являются мега-гениями, могут освоить, но примерно за пару недель, которые потребуются для того, чтобы физически прочитать несколько книжек по 1000 страниц.

Исходя из этого, чтобы твой манямир существовал, каждый заказчик в этом мире должен быть мега-гением с базовыми знаниями айти (питона, гита, быстро печатать), при этом не шизозадротом типа тебя, а бизнесмена, который вместо того, чтобы найти спеца и поручить ему задачу, будет сидеть две недели и читать книжки. Ты понимаешь, насколько ты поехавший?
Аноним 12/07/20 Вск 15:42:53 1749273315
>>1749233
>Мл не для тебя, покинь тред.
я вообще-то планирую до кабанчиков доводить саму идею и благодаря мне ты будешь получать деньги.

Но ты можешь дальше изображать илитку.
Аноним 12/07/20 Вск 16:27:09 1749332316
>>1749167
>Что-то я не верю в такой формат. Точнее, не вижу достаточного объема таких задача чтобы становиться фрилансером.
Становиться фрилансером нужно либо когда у тебя нихуя нет, ни вышки, ни мамки, чтобы кормила тебя, пока ты бесплатно хуйцы на кагле жрешь, ни квартиры в москве, чтобы устроиться куда-то помимо мухосранского завода, а есть только мозги и желание развиваться. Либо когда наоборот, у тебя есть все, и ты можешь поставить рейт в 100 баксов и раз в месяц получать приглашения на топовые халтурки, чтобы мозги на постоянном месте работы не заржавели. В остальном во фрилансе смысла нет. Он просто не стоит того, денег, как в офисе, а гемора на порядок больше.
Аноним 12/07/20 Вск 16:29:06 1749333317
>>1749332
Но ровно поэтому РАБОТЫ ПОЛНО. Ну тупо дохуя кабанчиков хочет чего-то, а на рынке 1.5 студента и 3 индуса. Если ты нормальный специалист, то это выбор контракта это ты приходишь и выбираешь его, а не кабанчик выбирает тебя.
Аноним 12/07/20 Вск 16:55:40 1749369318
>>1749273
Отчётики эксельные строить и с презенташкой выступать я и сам могу, спасибо, сбежал слава богу от этого уныния.
Аноним 12/07/20 Вск 17:19:18 1749404319
>>1749369
тогда к тебе нет мостика от денег.
Не понимаю, на что ты рассчитываешь.
на Кагле настолько много предложений что есть работы на любой вкусе?
или ты пытаешься показать нам какой ты непростой хуй и можешь выбирать топовые задания?

Я знаю что ты пиздишь.
Аноним 12/07/20 Вск 17:25:29 1749415320
>>1749404
Пиздеть ты тут начал про то про что не знаешь, а я чисто посадил тебя на жопу.
Аноним 12/07/20 Вск 17:48:11 1749447321
>>1748886
>ML хорошо фрилансится, потому что это замкнутые задачи - сделать датасет, добиться на нем такого-то перформанса. В итоге ты можешь собрать датасет - получить деньги, натренировать его - получить деньги, выдать программерам
Звучит неплохо, ковырять чужой пэхапе-проект, сделанный через задницу, звучит куда хуже.

>>1748943
>То, что сами кабанчики будут обучать себе сетки это такой же манямир, как представить то, что они будут сами ремонтировать себе автомобили или лечить зубы.
>>1749263
> Большинство людей просто очень тупые и ленивые.
>
Исходя из этого, чтобы твой манямир существовал, каждый заказчик в этом мире должен быть мега-гением с базовыми знаниями айти (питона, гита, быстро печатать), при этом не шизозадротом типа тебя, а бизнесмена, который вместо того, чтобы найти спеца и поручить ему задачу, будет сидеть две недели и читать книжки.
Двачую этого, хоть я и пока и ноль в мл пока, но с кабанчиками поработал знатно. Сказать что кабанчики тупые - это ничего не сказать. Просто как пример приведу - есть одна сельхозсфера, где люди готовы платить 50-200к за наводку на товар (по какому адресу, телефону и какого качества), которая ищется за 15 минут гугла и 5-10 телефонных звонков. Но вкатываться не советую, тк подводных море и все норовят друг друга кинуть. Но чсх, кабанчика даже готовая наводка все равно не спасает от рисков этого..
В ойти конечно люди поумнее, чем в колхозах и строительстве, но даже самый конченный ит-коммерс понимает что проще накинуть на хлеб васяну, чем разгребаться в числах самому, когда и так дел невпроворот.

>>1749332
> когда у тебя нихуя нет, ни вышки, ни мамки, чтобы кормила тебя, пока ты бесплатно хуйцы на кагле жрешь, ни квартиры в москве, чтобы устроиться куда-то помимо мухосранского завода, а есть только мозги и желание развиваться.
Ты прям меня описал, нихуя нет, дома даже комнаты своей нет, сижу на сьемной хате, работа в ойти щас вроде неплохая, но тупая, развития и перспектив нет. И с учетом аренды в копить мне на ту же хату лет 10-20 в режиме ультрасыча. Еботека не вариант, ебал совсем уж на ошейник садиться.
Только не совсем понял про мамку кормящую, ведь для старта фрилансоебства это идеальный безрисковый вариант. А вот когда такой возможности нет, безопаснее как раз в стабильный копроофис вкатываться, наверное. Но безопасность я ебал, олл ин хочу ставить.

>>1749333
Ты меня мотивируешь чот прям. Если скажем яп знаю (худо бедно могу сайт на фласке поднять с нуля, но для фриланса пока профессионально пожалуй не готов), алгоритмами и матаном заинтересован (впитываю активно), реально в мл-фриланс или мл-удаленку в бурже за полгода (без работы и сериальчиков, онли хуман лернинг) вкатиться?

>>1748442 - антон
Аноним 12/07/20 Вск 17:54:19 1749460322
>>1749447
>кабанчики тупые
Тут двояко прозвучало. Я имел ввиду что если человек оценивает свое время дороже, чем оплату услуг профи, то он неглупый. Таким коммерс и должен быть.
Но просто в большинстве сфер кабанчики тупо ленятся, а не анализируют выгодность. И готовы переплачивать оверпрайсы, лишь бы не думать.
Аноним 12/07/20 Вск 19:37:04 1749563323
>>1749460
С какого-то момента твое время стоит так дорого, что думать становится не выгодно. Дешевле нанять кого-то, кто будет думать за тебя.
Аноним 12/07/20 Вск 20:01:21 1749590324
> гыгы ну кабаны тупые
> сидят за свои 300 млн/месяц не понимают ничё в эмэле
> слава богу есть такие как я которые ковыряют вилкой данные 40 часов в неделю за ажно 300к/мес
Хуя гонор у ящикотрясунчикового технарескота.
Аноним 12/07/20 Вск 20:05:26 1749596325
>>1749590
>слава богу есть такие как я которые ковыряют вилкой данные 40 часов в неделю за ажно 300к/мес
Большинство в треде вообще бесплатно ковыряет, или за <100к.
Аноним 12/07/20 Вск 20:13:34 1749609326
15422504181381.mp4 122Кб, 480x360, 00:00:02
480x360
Аноним 12/07/20 Вск 20:24:44 1749623327
>>1749590
Эх щас бы в СНГ интеллект по количеству зарабатываемых денег оценивать.
Мне когда было 13 лет, я был ватаном-коммунистом и думал что богачи скам. Когда мне было 18, я был мамкиным капиталистом, и думал что если у человека есть деньги, значит он априори умный. Просто как аксиома.
Сейчас мне 25, и я понимаю что абсолютно никак не коррелируют мозги и деньги. Есть богатые гении Стив Жопс, Иван Маск etc, есть нищие гении Перельман отказавшийся от миллиона, или люди ИТТ, есть богатые деграданты большинство всяких депутатов и владельцев колхозов например, и бедные тупые черви 99% населения СНГ.

Успех зависит от таких вещей как ушлость, аморальность, активность, смекалистость, социоблядтво, стартовые условия и самое главное - удача. Интеллект без тупо фарта ничего не стоит к сожалению.
Алсо друг работает в охотничьем, там депутат 8 раз пытался складной нож открыть нажатием на кнопку, при этом пальцами своими жирными просто мешая выйти лезвию. И орал матом хуле он не открывается. Друг говорит я удивляюсь как он на охоте еще себе в глаз не выстрелил.
Зато у него только один катер за 80 млн рублей на 3500лс.
А колхозники на крузаках приезжают ружья покупать по 800к, так они блядь в записную книжку айфона номер сохранить не могут.
Я не говорю что лучше быть умным и бедным, чем богатым дураком, просто хочу сказать что быть богатым - никак не мешает быть пиздецки тупым.
Аноним 12/07/20 Вск 20:31:59 1749628328
>>1749563
Ну я про это и говорю. Но вот в случае с теми сельхозаврами я реально не понимаю как можно проебывать 20-30% чистой прибыли, просто не умея в гугол.
Аноним 12/07/20 Вск 21:04:17 1749650329
>>1749628
>просто не умея в гугол
здравствуйте, мы занимаемся обучением нейросеток именно для того чтобы поощрять лень. Чтобы человек не искал уже что ему нужно, а чтобы ему адсенс советовал именно то что нужно. Или там плейлист в ютубе. Работа кабанчиков- это просто ответственность. Козлы отпущения на случай проеба, и чем он ленивее, тем лучше будет выполнено задание, а не искать выход из замкнутого круга -работа-гроб-кладбище-нутыпонел. Ну и тем меньше ему надо для удовлетворения своих потребностей.
Минимизация количества нейронов для улучшения сходимости в задаче.
Давай я тебе дам просто охуенную аналогию в цепочке "владелец-директор-менеджеры-главные инженеры-среднего звена менеджеры- прорабы- рабочие- кабанчики". В этой цепочке не принято, чтобы кто-то получал больше, чем тот, кто стоит выше в иерархии. Потому что каждый из них несет больше ответственности и более компетентен, чем тот, кто стоит ниже в иерархии. Так и в нейронной сети для распознавания- каждый слой должен работать с меньшим разрешением, с меньшей ответственностью, чем первый слой. От общего контура к попиксельным квадратам. И если пирамида ошибается в стратегии (общем контуре фичи), то далее будет хуже-(уже все равно что, инженерам поставили гвозди вместо саморезов- это не так страшно, если для самолета рассчитывают ну предположим, гидродинамику вместо аэродинамики, потому что директор сказал, что хочет сделать пассажирский летающий лайнер). Вот и не нужно у нас на слое менеджеров-инженеров быть каким-то там программистом с абстрактным математическим мышлением. Дай боже он верно активировал связь к нейрону в своем мозгу и ему хватит силы воли набрать номер специалиста а не проебать все, сказав кабанчикам- "прибивайте саморезами".
В итоге у нас на выходе в обществе уже давно продаются услуги и гарантии их выполнения. но это, в принципе, верно, как мы видим на примере нейросеток. По другому- это уже "котики на единорогах", а таких мало, но обнадеживает одно - в МЛ рисерче их, котиков, относительно много. Авось прорвемся.
Тут можно еще сильнее в политоту удариться, например почему у нас такие люди-фукнции, люди-скрипты существуют и их так много становится. Давай не будем. Извините, меня часто заносит.
Аноним 12/07/20 Вск 21:46:36 1749691330
>>1749092
Вот ты строчил это полчаса, а он пришлет картинку с тайдменом и пойдет дальше по тематикам шитпостить
Аноним 12/07/20 Вск 21:54:05 1749697331
>>1749447
>Только не совсем понял про мамку кормящую, ведь для старта фрилансоебства это идеальный безрисковый вариант
С мамкой можно попрбовать оказаться в топ 90% кагла в нескольких соревнованиях, а с этой хуйней проситься уже на полноценный онсайт либо западную удаленку. У меня воспоминания о фрилансе примерно как об армейке, это был дикий гемор, но теперь я мужик. Но, как и в случае с армейкой, я мало кому посоветую повторять мой опыт. Сейчас у меня 5 лет один и тот же клиент, фактически работодатель, это намного приятнее и с точки зрения стабильности, и с точки зрения самореализации.
Аноним 12/07/20 Вск 21:59:31 1749702332
15087416658421.jpg 400Кб, 1024x1330
1024x1330
Аноним 12/07/20 Вск 22:00:25 1749703333
>>1749702
Почитай fooled by randomness талеба
Аноним 12/07/20 Вск 22:02:55 1749706334
>>1749691
В таких постах ценен не результат, а процесс, который приводит к новым мыслям. А что там какой-то анонимус шитпостит вообще похуй, как будто я всерьез собираюсь переспорить кого-то на имиджборде
Аноним 12/07/20 Вск 23:06:12 1749760335
>>1749702

И чё это за хуйня и на чём основанна?

Чтоб быть богатым надо занимать РУКОВОДЯЩУЮ должность. Надо уметь быть лидером. Это не требоет(вернее не обязательно требует) интеллекта. Даже у негров в банде и у волков в стае тоже есть лидер. Есть лидеры в IT, в науке, в спорте и тд.

Это не зависит от интеллекта, образования и тд. И это тяжело просто так взять и развить, если этого нет.

Если ты прирожденный лидер - будут баксы. Если не лидер - не будут.
Аноним 13/07/20 Пнд 00:27:46 1749805336
>>1749702
> опросили бедных, богатых и середняков
> бедные: твари мрази по блату устроились!!
> богатые: самидобились!!!1
> середняки: ну наверное всего понемногу хз)
А ты скорее всего не очень сообразительный, раз думаешь что эта говнографика представляет собой какой-то аргумент. Мл не для тебя, будет лучше если ты покинешь тред.
Аноним 13/07/20 Пнд 01:10:07 1749839337
>>1749691
>мл - это айти среди айти, доступно единицам, слишком много компетенций должно пересекаться
Хуйню он написал. Худшие студенты с моего потока пошли заниматься data science, а лучшие стали разработчиками. Потому что получить конкретное техзадание, связанное с продуктом, для которого нет типового решения, и надо сначала спроектировать модуль, а потом еще и элегантно встроить его в существующий код - это сложно, и для решения такой задачи надо самостоятельно думать. А мл задачи, если не считать научные исследования, все типовые и решаются с гуглом.
Аноним 13/07/20 Пнд 01:48:44 1749867338
>>1749839
>если не считать научные исследовани
Действительно инновационные вещи делает один процент, а остальные работают sort of макаками. Так что научные исследования туда же - все делается гуглом и тупым перебором.
Аноним 13/07/20 Пнд 03:19:25 1749893339
>>1749703
Да, кстати у талеба хорошо прописана идея что по сути все упирается в фарт. И что успешные стали успешными, не потому что талантливы, а потому что по случайности получили популярность, и в связи с этим стали успешны и их "талант" признали.
А сотни и тысячи не менее талантливых, но более невезучих, соснули хуйца.
Аноним 13/07/20 Пнд 09:02:20 1749965340
>>1749839
>Худшие студенты с моего потока пошли заниматься data science, а лучшие стали разработчиками
"Лучшие студенты" становятся разработчиками, потому что это легкий вкат при наличии хоть каких-то мозгов, и большие для студента деньги. Все это дает ощущение своей особенности, вон какой ты крутой, тебе только 20, а получаешь на уровне сеньора. А потом проходит 15 лет, и тебе 35, а ты получаешь на уровне двадцатилетнего. Упс. Потому что легкий вкат работает в обе стороны - да, программистам платят больше, чем парикмахерам, потому что требуется интеллект, а в рашке так вообще прилично, потому что рынок труда международный. Но это и все. Хочешь получать много - езжай в Калифорнию и продавай свои жопочасы там. Охуенный карьерный рост, что-то на уровне таджика-каменщика, который вырос, переехав в Москву. Со временем "сложные задачи" (тут совсем смешно) превращаются в однообразную рутину, а ты фактически как продавал свои жопочасы в обмен на деньги, так и продаешь. И весь /зк/ наполнен этой болью.
Аноним 13/07/20 Пнд 12:57:14 1750103341
>>1749623
>депутат 8 раз пытался складной нож открыть нажатием на кнопку, при этом пальцами своими жирными просто мешая выйти лезвию. И орал матом хуле он не открывается.
>Зато у него только один катер за 80 млн рублей
Это говорит о том, что у ножа был плохой UI, а у дорогого катера - хороший.
Делайте хороший UI, это важно для UX
Аноним 13/07/20 Пнд 13:03:25 1750111342
>>1750103
Бля он выкидной нож обычный держал полным обхватом, Нож пытался, но не смог превзойти интеллект депутата.
Аноним 13/07/20 Пнд 13:20:35 1750117343
>>1747781
Благодарю! Дёшево и сердито. С колобков орнул.
Аноним 13/07/20 Пнд 13:23:45 1750119344
>>1747781
Я просто имел ввиду задним числом, после 10 лет обучения сеточки, которая больше моей мамки, выдернуть как-то потом удачные случаи, если кэлбеков не сделал. Но, видимо, не судьба.
Аноним 13/07/20 Пнд 13:27:28 1750128345
>>1749596
>>1749609
А что, за просто ковыряние без гарантии результата ещё и деньги платят?
Аноним 13/07/20 Пнд 13:28:54 1750130346
>>1750128
Какие еще гарантии результата в нейронках, лол?
Аноним 13/07/20 Пнд 13:37:06 1750133347
>>1750119
Не волнуйся, если финальный результат говно, значит и все промежуточные скорее всего были говном. Наверни столько регуляризации, чтобы сетка не уходила в оверфит даже после 100 лет на nvidia 66680
Аноним 13/07/20 Пнд 13:37:46 1750134348
>>1750128
Это называется наукой
Аноним 13/07/20 Пнд 19:29:00 1750551349
>>1748893
какой же ты завистливый, п-ц просто
Аноним 13/07/20 Пнд 19:35:19 1750560350
>>1749703
Давай я перескажу эту книгу в одно предложение:
> Входите в сделки с положительным мат. ожиданием и не входите в сделки с отрицательным мат. ожиданием

Всё, книгу можно не читать
Аноним 13/07/20 Пнд 19:40:23 1750565351
У меня есть такая задача: предсказать не дискретное значение от -1 до 1. Я хочу взять Tensorflow Regression для этого. У меня во входных данных иногда могут появляться коэффициенты, которые коррелируют с искомым значением, и эти коэфы вычислены аналитическим путём, без всякого ML-читерства. Но в 90% эти коэфы не будут вычислимыми. То есть вообще невозможно вычислить, потому что во вводных данных нет неких событий.

Как я понимаю я не могу отдать в Тензорфлоу null по одному из полей, то есть все и каждые коэфы должны быть проставлены. У меня вопрос: можно ли передавать два значения: одно будет битом 0/1 (нет коэфа или есть), а второе — самим коэфом. То есть я понимаю, что я физически могу это сделать, но будет ли Тензорфлоу строить какую-то корреляцию или что-то такое.
Аноним 13/07/20 Пнд 20:16:50 1750606352
>>1750560
>Давай я перескажу эту книгу в одно предложение:
> Входите в сделки с положительным мат. ожиданием и не входите в сделки с отрицательным мат. ожиданием
Лол, нет. Это ровно противоположная вещь, которая там написана. Ты не знаешь истинного матожидания сделки, только среднее в прошлом, но проблема в том, что когда у тебя распределение с тяжелыми хвостами, это самое среднее по историческим данным не говорит о реальном матожидании, которое бог заложил в симуляции вселенной, ничего.
Если на пальцах, ты открываешь в рашке ресторан, получаешь небольшую прибыль, тебе кажется, что матожидание положительное, а потом у тебя этот ресторан отжимают и ты теряешь все свои накопления. Почему? Потому что риск оказался ассиметричным: частый небольшой профит и редкие события, приводящие к тотальному краху. Матожидание, кстати, при этом все равно может быть положительным. Ну типа, зарабатывал ты по миллиону рублей в год 10 лет, а на 11-й год проебал 9 миллионов. С точки зрения матожидания все заебись, положительное, открывайте рестораны в рашке. А на деле тебе, опять-таки, пиздец.
Если пересказывать книгу в одно предложение, то это "входите в сделки, у которых возможные потери небольшие, а возможный куш - большой, и бегите от сделок, которые дают маленький положительный профит регулярно, зато изредка в которых ты теряешь все".
Аноним 13/07/20 Пнд 20:40:34 1750626353
>>1750565
Я думаю тебе лучше использовать метод, который позволяет задавать входным данным их вероятность. Тогда у вычисленных коэффициентов дисперсия будет нулевая, а у неизвестных - равномерно размазана от -1 до 1.
Типа https://blog.tensorflow.org/2019/03/regression-with-probabilistic-layers-in.html , вроде то. Глубокие модели с такой хуйней тоже есть, но от меня это далековато.
Аноним 13/07/20 Пнд 20:41:36 1750628354
>>1750606
>Ты не знаешь истинного матожидания сделки, только среднее в прошлом, но проблема в том, что когда у тебя распределение с тяжелыми хвостами, это самое среднее по историческим данным не говорит о реальном матожидании, которое бог заложил в симуляции вселенной, ничего
Классика кукаретики. Брат назиф в том же ряду что и местный шиз с его "критикой" нутупых машобщиков.
Аноним 13/07/20 Пнд 20:42:28 1750629355
>>1750565
>можно ли передавать два значения: одно будет битом 0/1 (нет коэфа или есть), а второе — самим коэфом
Можно
Аноним 13/07/20 Пнд 21:23:48 1750652356
>>1750606
> входите в сделки, у которых возможные потери небольшие, а возможный куш - большой, и бегите от сделок, которые дают маленький положительный профит регулярно, зато изредка в которых ты теряешь все
Я помню, он приводил в пример себя и соседа, которому он завидовал. И в один прекрасный день сосед лососнул тунца. Но Талеб не делает на этом случае акцента
Аноним 13/07/20 Пнд 21:28:58 1750661357
>>1750628
Если ты назвал кого-то местным шизом, это не значит, что ты не являешься точно таким же местным шизом.
Аноним 13/07/20 Пнд 22:23:33 1750709358
>>1750661
кто тут блядь шиз
ты блядь шиз
Аноним 14/07/20 Втр 01:39:10 1750825359
Пилите кулстори как вкатывались в мл
Аноним 14/07/20 Втр 01:44:22 1750834360
>>1746603
Не, это другой анон.
Это я >>1748442 в том треде перспективы прикидываю Но там всем похуй на мл.
Аноним 14/07/20 Втр 07:42:07 1750943361
А что у вас используется в качестве desktop software?

Я больше наблюдаю статей о jupyter, но ведь если строительные компоненты давно известны, может быть можно просто накидать цепочку преобразований и потом сохранить в виде какого-нибудь кода на питон?
Вот есть всякие штуки от apple https://developer.apple.com/documentation/createml/creating_an_image_classifier_model

Если не используется, то почему?
Аноним 14/07/20 Втр 09:53:38 1750985362
>>1750943
>Если не используется, то почему?
Почему не используется, если каждая корпорация выпускает подобную хуитку, как облачную, так и локальную. Рыночек сейчас ищет оптимальный софт, чтобы типовые задачи можно было делать без красноглазия.
Но тут проблема в том, что вот есть типовая задача, распознавание лиц, например. Нахуя тебе, если ты васян, далекий от мл, вообще что-то обучать, когда ты можешь скачать dlib с уже обученной сеткой? То есть нужно попасть в узкую нишу, когда готовых библиотек тебе мало, а питона с его автоматизацией любого пука много.

Серьезные люди не используют, потому что это типичная история, как в случае с 1С или макросами в ворде, удобнее иметь скрипт, который делает за тебя все, даже если для его написания приходится покопипастить из туториала вместо того, чтобы накликать мышкой те опции, который выдал тебе автор гуя. Я использовал nvidia digits в 2015, в конце концов объем выполняемой рутины меня заебал, от запуска отдельных скриптов для препроцессинга, до просто однообразных кликов мышкой. Но все это близко к срачу редакторы vs ide, думаю в ближайшие 10 лет наплодится достаточно макак, которые будут пользоваться такого рода софтом.
Аноним 14/07/20 Втр 10:17:36 1751000363
>>1750985
в смысл гугл/эпл/ms ? А такого, чтобы бесплатно на своих ресурсах или сразу в десктопе покрутить - нету?

На самом деле я нашел одну, но не понимаю почему очень мало информации о ней. Неужели я нашел золотую жилу? такого не может быть

>Нахуя тебе, если ты васян, далекий от мл, вообще что-то обучать, когда ты можешь скачать dlib с уже обученной сеткой?

Потрясти черные ящики, сравнить классификаторы и понять имеет ли смысл звать профи для выпуска продукта!
Аноним 14/07/20 Втр 10:30:48 1751015364
>>1751000
> А такого, чтобы бесплатно на своих ресурсах или сразу в десктопе покрутить - нету?
Я упомянул nvidia digits, это то, с чем работал сам. Уверен, что дохуя подобного.
>Потрясти черные ящики, сравнить классификаторы и понять имеет ли смысл звать профи для выпуска продукта!
Так спроси у профи, либо заплати ему. Как будто у тебя есть миллион на выпуск продукта, а 1-20к на консультацию жалко.
Аноним 14/07/20 Втр 10:41:30 1751024365
>>1751015
ну погоди, на продукт далеко не миллион.
если продукт внутренний, он может быть сколь угодно уебищным и дешевым, а пользоваться им будут с удовольствием. лишь бы прогнозы выдавал или классифицировал.

Короче, не очень понятно отсутствие внятных десктопных софтов. Мне экселя ждать?
Аноним 14/07/20 Втр 11:58:59 1751075366
>>1751024
Да освой питон и не еби мозг. У тебя вся жизнь впереди, пригодится
Аноним 14/07/20 Втр 12:44:36 1751107367
>>1751075
так я то знаю питон. мне нужен РАД.
Аноним 14/07/20 Втр 16:12:30 1751301368
1) учу основы линала
2) учу матан
3) учу тервер
4) учу матстат
5) прохожу курсы из специализации "машоб и анализ данных на курсере"
6) профициты


Рейт
Аноним 14/07/20 Втр 16:20:40 1751318369
>>1751301
>1) учу основы линала
>2) учу матан
>3) учу тервер
>4) учу матстат
>5) прохожу курсы из специализации "машоб и анализ данных на курсере"
>6) ...
>7) профициты
Пофиксил
Аноним 14/07/20 Втр 16:43:53 1751337370
Аноним 14/07/20 Втр 17:14:40 1751362371
>>1751301
Учи как стакать слои + постоянно выковыривай из свежих булшитных статей новые модные баззворды: вуаля, ты специалист по мошонобу.
Аноним 14/07/20 Втр 17:57:05 1751390372
Аноним 14/07/20 Втр 18:26:53 1751418373
15945239917441.jpg 76Кб, 592x532
592x532
>>1751301
> Рейт
10 тайдменов из 10.
Аноним 14/07/20 Втр 22:25:12 1751641374
А какие на skleрновских датасетах-то наилучшие результаты? К чему стремиться?
Аноним 15/07/20 Срд 02:24:41 1751651375
>>1734710 (OP)
Приветики, трясунишки, как делишки?
Аноним 15/07/20 Срд 09:26:39 1751731376
Вопрос по поводу BatchSize и GPU, влияют ли эти два параметра непосредственно на качество нейросети а не скорости?
Аноним 15/07/20 Срд 12:16:42 1751809377
>>1751651
Да так, продолжаем потихоньку лишать работы додиков вроде тя, а у самого как?
Аноним 15/07/20 Срд 13:20:37 1751855378
>>1751809
>а у самого как?
Нормусик, пью пивасик с курочкой из KFC
Аноним 15/07/20 Срд 13:33:20 1751875379
>>1751731
Батч влияет, гпу нет.
Аноним 15/07/20 Срд 15:49:42 1752034380
>>1749965
>тебе 35, а ты получаешь на уровне двадцатилетнего. Упс

Так в ds точно такая же ситуация. Очевидно, что у каждой профессии есть свой потолок зп. Как правило из обычных разработчиков идут либо в архитекторы, либо в лиды. И дальше в сторону менеджмента.
Аноним 15/07/20 Срд 16:44:28 1752099381
>>1752034
хм, так это в любой нормальной профессии так.
Аноним 15/07/20 Срд 16:46:41 1752101382
>>1752034
>тебе 35, а ты получаешь на уровне двадцатилетнего.
>Так в ds точно такая же ситуация
Ты наркоман
Аноним 15/07/20 Срд 16:49:03 1752105383
>>1752101
>Так в ds точно такая же ситуация
Что не так?
Аноним 15/07/20 Срд 16:49:22 1752106384
image.png 5Кб, 506x130
506x130
Как эта хуйня работает? Для axis = 0 всё логично. Для конкретного значения индекса берётся срез. А для axis = 1 какая-то наркомания выводится.
Аноним 15/07/20 Срд 17:23:39 1752144385
>>1752106
>Как эта хуйня работает?
https://numpy.org/doc/stable/reference/generated/numpy.unique.html
When an axis is specified the subarrays indexed by the axis are sorted. This is done by making the specified axis the first dimension of the array (move the axis to the first dimension to keep the order of the other axes) and then flattening the subarrays in C order. The flattened subarrays are then viewed as a structured type with each element given a label, with the effect that we end up with a 1-D array of structured types that can be treated in the same way as any other 1-D array. The result is that the flattened subarrays are sorted in lexicographic order starting with the first element.

>А для axis = 1 какая-то наркомания выводится.
Для axis=1 у тебя на входе 3 элемента. [1, 1, 2], [0, 0, 3] и [0, 0, 4], он в выводит их отсортированными сначала 003, потом 004, потом 112, но располагаются они вертикально, потому что axis=1. Хочешь отсортировать взад, возвращай индексы и сортируй.
Аноним 15/07/20 Срд 18:21:24 1752207386
>>1752144
>но располагаются они вертикально
А, вот что за хуйня. Понял.
Аноним 15/07/20 Срд 19:25:51 1752255387
Так почему при бутстрапе получаются нескоррелированные модели?
Аноним 16/07/20 Чтв 01:04:09 1752477388
Screenshot106.jpg 73Кб, 692x603
692x603
Почему эти итальянцы использовали ARIMA для предсказания развития короновируса ?

https://www.researchgate.net/publication/339520139_Application_of_the_ARIMA_model_on_the_COVID-2019_epidemic_dataset

почему еще многие ссылаются на это исследование?
Какие вообще практические свойства у ARIMA ?
Если новые заболевшие короновирусом должны представлять собой типичную логистическую кривую, почему тогда ARIMA ?

Или они пытались типа на неделю вперед предсказать как сильно врачи и статисты на выходных отдыхают?
Аноним 16/07/20 Чтв 05:43:21 1752536389
15942510414331.gif 425Кб, 931x682
931x682
>>1752477
> Почему эти итальянцы использовали ARIMA для предсказания развития короновируса ?
Потому что это стандартный алгоритм для анализа временных рядов последние лет 30?
> Если новые заболевшие короновирусом должны представлять собой типичную логистическую кривую, почему тогда ARIMA ?
Наверное, потому что число заболевших это временной ряд, как думаешь?
Аноним 16/07/20 Чтв 08:39:52 1752557390
>>1752536
>Потому что это стандартный алгоритм для анализа временных рядов последние лет 30?
Ну допустим.
но ведь суть процесса в том, что он не повторяется. Это тупо логистическая кривая. Процесс идет в одну сторону.

И что, тайдмену уже спросить нельзя?
Аноним 16/07/20 Чтв 10:19:32 1752588391
>>1752557
Арима учитывает и тренд и цикличность, но вообще это кал ебаный, когда есть лстм.
Аноним 16/07/20 Чтв 10:19:37 1752589392
>>1752557
> но ведь суть процесса в том, что он не повторяется. Это тупо логистическая кривая. Процесс идет в одну сторону.
Суть процесса в том, что это временной ряд. Логистическая кривая - это предполагаемая модель данного процесса, никак не запрещающая использовать arima. Вообще, предсказывать макаронавирус дело такое, со статистикой много где мухлюют, считают везде по разному итд.
> И что, тайдмену уже спросить нельзя?
Кто сказал что нельзя? Все можно.
Аноним 16/07/20 Чтв 12:17:18 1752676393
Нейронач, мне нужно сделать новые фото енотовой с помощью нейронки, например где её лицо чуть вбок смотрит и эмоции другие. Есть куча реальных фото и чб видео с плохим качеством. Пробовал artbreeder вроде ненеплохо но не то, к тому же он из некоторых фото делает монстров. Поэтому хочется свою нейронку поднять для этого. StyleGAN для этого подойдёт? Ещё интересует как с помощью него делать морфинг, из одной фотки плавно в другую.
Аноним 16/07/20 Чтв 12:18:17 1752678394
>>1752255
> Так почему при бутстрапе получаются нескоррелированные модели?
Как это вообще связано, бустреп же это способ подавать семплы.
Аноним 16/07/20 Чтв 12:36:27 1752709395
>>1752589
Но по Швитым США можно.
Мне интересно как они рассуждали о процессе и почему сразу выбрали arima.
Как бы вы поступили?
Аноним 16/07/20 Чтв 13:07:53 1752738396
>>1752678
Ну бэггинг же, потом на этих семплах обучаем модели и усредняем. В результате дисперсия соответсвенно уменьшается, но только если они нескоррелированы между собой. При этом утверждается что они таки нескоррелированы, но путём недолгого гугления доказательства этого я не нашёл.
Аноним 16/07/20 Чтв 13:08:53 1752741397
>>1752709
Всегда в первую очередь берут ариму просто, эт бейcлайн.
Аноним 16/07/20 Чтв 14:02:58 1752810398
>>1752676
в одном из последних (за пол года) выпусков https://www.youtube.com/channel/UCbfYPyITQ-7l4upoX8nvctg было про то, что есть возможность даже на одном фото так делать- оживить джоконду например. Фишка в том, что код тогда не опубликовали, потому что "боялись, что эту технологию будут использовать в преступных целях". Я не следил, надо тебе проверить, может выложили. stylegan помоему для этого не подходит, он больше для pix2pix преобразований и генерации, если у тебя, конечно, нету много нужного датасета.
Аноним 16/07/20 Чтв 14:10:43 1752821399
>>1752810
> Фишка в том, что код тогда не опубликовали, потому что "боялись, что эту технологию будут использовать в преступных целях". Я не следил, надо тебе проверить, может выложили.
Да давно уже всё выложено для дип фейков https://github.com/AliaksandrSiarohin/first-order-model
Есть и боты в телеге, где он тебе по фото и видео, фото анимирует.
Аноним 16/07/20 Чтв 14:14:12 1752825400
>>1752738
> При этом утверждается что они таки нескоррелированы
Потому что на разных выборках обучаются.
Аноним 16/07/20 Чтв 15:59:39 1752983401
>>1752810
А нейронка которая плавные фото делает из одного рисунка в другой как называется?
Аноним 16/07/20 Чтв 16:46:20 1753027402
Аноним 16/07/20 Чтв 18:01:08 1753080403
Тратить ли полгода-год на математику перед вкатом или сразу начинать бомбить машоб? Перехожу на третий курс матфака, когда то сдал все экзамены и зачёты, но знаний в голове особо не закрепилось. Стоит ли досконально изучать ее? До потенциального трудоустройства где то года два ещё...
Аноним 16/07/20 Чтв 18:43:43 1753130404
>>1753080
Какую вы блять математику хотите дрочить. Там от неё элементарные вещи нужны. От матана что такое градиентный спуск, производные от функций уметь брать. От линала как с матрицами работать. От теорвера просто базовые знания, от матстата функция максимального правдоподобия, критерии разные там, байес, ну по мелочам то есть.

> До потенциального трудоустройства где то года два ещё...
Хеллоу, тру пацаны с первого курса работают, а с третьего это обязательно, если ты не нуб. Пиздуй на стажировку.
Аноним 16/07/20 Чтв 19:25:10 1753180405
Аноним 16/07/20 Чтв 20:04:26 1753213406
>>1753180
Подвыборка не показывает распределения всей выборки. Если ты будешь обучать модели на разных подвыборках, то они будут представлять разные части изначального распределения. А вот как раз, когда ты будешь их вместе собирать через среднее это даст тебе результат будто ты обучался по всему распределению.
Ещё ты можешь разные модели использовать.
Аноним 16/07/20 Чтв 20:40:20 1753235407
>>1753213
>Подвыборка не показывает распределения всей выборки. Если ты будешь обучать модели на разных подвыборках, то они будут представлять разные части изначального распределения.
Всё это рукомахательство где я только не читал (ну "разные части" и что? как это мешает на них одну формулу получить?) Мне бы доказательство где почитать.
Аноним 16/07/20 Чтв 20:44:56 1753238408
>>1753235
Как ты себе представляешь доказательство, что на разных данных модели обучаются по-разному?
Аноним 16/07/20 Чтв 20:54:31 1753249409
>>1753238
> на разных данных модели обучаются по-разному
Утверждение о том что модели нескоррелированы если выбирать подвыборки независимо и с возвратом это математическое утверждение. Если оно вообще верно, я сейчас уже что-то сомневаюсь, похоже на обычный ml булшит.
Аноним 16/07/20 Чтв 21:08:21 1753258410
>>1753249
Ну хуй знает. Ты даже условия этого "математического утвеждения" не сформулируешь. Что такое модель, что такое нескоррелированы, что такое выбирать независимо и тд.
Аноним 17/07/20 Птн 00:14:00 1753391411
народ, расскажите плз о состоянии рынка компьютерного зрения. Испульзуется ли классика? Для чего, кроме ебучих масок, вообще сейчас применяется? Что там с облаками точек?
Если найдется компетентный анон, с меня благодарственное нихуя
Аноним 17/07/20 Птн 00:15:23 1753393412
>>1753391
а ну и самое главное, я разрабатывал на с++, питоне и знаю 3d зрени (как раз облака точек и тд) куда двигаться дальше в таком случае? есть ли потребность в рашке? на hh увидел, в основном, спрос на дата саентистов в этой области
короче сложно все, не хуесосте плиз
Аноним 17/07/20 Птн 00:35:47 1753400413
>>1753393
Ты можешь придти к кабанчику и сказать что готов разработать промышленный контроль сборки ебанины..

А не извини. Не можешь. Датасатанисты же белоручки и заняты штудированием новых статей...
Аноним 17/07/20 Птн 01:14:41 1753417414
>>1753400
>Датасатанисты же белоручки и заняты штудированием новых статей...
А ещё дохляки почти все как один, мужикам на заводе подсобить не могут.
Для кабанчика трагедия конечно что нельзя нанять мастера на все руки за мелкий прайс, но щито поделать, такова суть специализации и касты интеллектуального труда.
Аноним 17/07/20 Птн 01:42:22 1753425415
>>1753417
В твоих влажных мечтах о кагле.

Как можно отделить работу с данными от математики? А вдруг постановщик задачи неправильно объяснит низшей касте и тот неправильно подготовит данные?
Аноним 17/07/20 Птн 01:45:36 1753427416
>>1753425
> В твоих влажных мечтах о конвеере
> Как можно отделить изготовление одной детали от другой? А вдруг один рабочий неправильно сделает и с другой деталью несостыкуется?
Аноним 17/07/20 Птн 01:50:44 1753428417
>>1752477
>Почему эти итальянцы использовали ARIMA для предсказания развития короновируса ?
Потому что при публикации важно опубликовать что-то новое
>почему еще многие ссылаются на это исследование?
Потому что без пруфов того, что ты прочитал что-то по теме, тебя никто не опубликует
>Какие вообще практические свойства у ARIMA ?
На дедовском калькуляторе удобно считать
>Если новые заболевшие короновирусом должны представлять собой типичную логистическую кривую, почему тогда ARIMA ?
Не должны, логистическая кривая получается из довольно сильного упрощения реальности, когда все равномерно, однородно и тому подобное. Но в любом случае результатом такого упрощения явлется диффур, решением которого является логистическая кривая. Диффур этот связывает прежде всего скорость роста заболевших с количеством заболевших с одной стороны, и количеством людей с иммунитетом с другой стороны.
ARIMA работает примерно так же - предсказание будущей точки является некоторой линейной комбинацией точек из прошлого. То есть она описывает эту связь, а потом ты влоб ищешь коэффициенты, которые этой связи удовлетворяют.
>Или они пытались типа на неделю вперед предсказать как сильно врачи и статисты на выходных отдыхают?
Тебе не похуй? Статей выпускается куча, эта явно не самая интересная.
Аноним 17/07/20 Птн 02:14:57 1753434418
>>1753391
>народ, расскажите плз о состоянии рынка компьютерного зрения.
Рынок широк и разнообразен. Активно пилят цифровой гулаг, есть конторы, работающие на западных заказчиков, там делают что угодно, есть филиалы западных контор. Это то, с чем сталкивался я либо знакомые.
>Испульзуется ли классика
Правильный вопрос - реально ли устроиться без нейронок. Классика используется конечно, те задачи, которые она покрывала хорошо, она до сих пор покрывает хорошо - быстро и без проблем. Но нейронки лучше освоить.
Если ты прям программист-программист, можно попасть на непыльное и хлебное место типа запиливания питономоделей на С++. А так все сильно разнообразно, не угадаешь, куда возьмут и что ты там делать будешь.
Аноним 17/07/20 Птн 02:46:06 1753439419
Screenshot2020-[...].png 85Кб, 661x380
661x380
>>1753249
>При этом утверждается что они таки нескоррелированы, но путём недолгого гугления доказательства этого я не нашёл.
Ты даже пикрелейтед не нашел?
Или тебе не понятно, почему мы считаем, что (y,x) independently drawn from P? Это предположение. Хороший датасет должен удовлетворять этому условию. Это лежит уже вне области математики.
Аноним 17/07/20 Птн 03:32:23 1753451420
>>1753391
Рынок будет хлебный. Есть surviliance, industial области. Можно например научиться контролировать расстояния на этикетках и идти на какой-нибудь завод предлагать свои системы, потому что системы от когнекса-омрона стоят охренелионы денег, можно вкатиться в глубокое обучение и делать беспилотные автомобили-комбайны-трамваи-грузовик-поезда, цветет область адасов, если хочется 3д - осваивай sensor fusion и долбись в яндексовые беспилотники, можно вкатиться в медецину и пилить системы поиска специфических медецинских объектов на данных кт, вообщем работы вагон. Но желательно не попадаться кабанчикам, или к людям не работающим изначально с ML/DL и непонимающим чего они хотят.
Аноним 17/07/20 Птн 07:23:28 1753519421
>>1751418
А как учатся тру мужики, суровые, гречневые?
Аноним 17/07/20 Птн 08:19:28 1753536422
>>1753428
>Тебе не похуй? Статей выпускается куча, эта явно не самая интересная.
а принеси другую? посмотреть.
Разумеется, статью с LTSM я уже прочитал и она тоже не вдохновила
Аноним 17/07/20 Птн 10:08:26 1753592423
>>1753391
комп зрение хуета в рф. заводов нормальных в стране - хуй, а в каких-то мелких цехах твое комп зрение никому не нужно.
беспилотные автомобили - годнота. селф драйвинг карс от яндекса вроде самый топ сейчас у нас.
а так в основном будешь пилить какой-нибудь цифровой гулаг по типу видеонаблюдения для какого-нибудь кабанчика
Аноним 17/07/20 Птн 11:46:18 1753632424
>>1753434
офигеть, очень удивлен твоим словам. Я на какой-то момент и правда подумал что без DL делать вообще нехуй. Не то что бы я прям против этого - все таки тоже инструмент и знать его надо. Но складывалось ощущение, что у нас ТОЛЬКО он и есть.
Блин, а вот если я буду сам писать в конторы, даже когда у них нет подходящей вакансии из разряда "очень хочу к вам" это норм или нет? А то действительно есть какой-нибудь artec или smass, но на hh их не видел (точнее не видел только смас, артек для примера клевой конторы)
Аноним 17/07/20 Птн 12:50:17 1753712425
>>1753592
>цифровой гулаг
Словно что то плохое, либирах нужно детектить на автомате.
Аноним 17/07/20 Птн 13:10:32 1753727426
15887780752390.png 234Кб, 603x324
603x324
>>1753632
только в этом треде нехуй делать без DL и докторской степени.
А так - можно.
Аноним 17/07/20 Птн 13:12:55 1753730427
Может не по теме но всё же, нужно результат работы обучающейся нейросети в виде массива изображений [n_w;_n_h] изображений выводить каждую эпоху. Хорошо бы использовать matplotlib, но не смог его заставить интерактировать. Что делать?
Аноним 17/07/20 Птн 13:20:12 1753747428
>>1753727
>докторской степени.
По философии?
Аноним 17/07/20 Птн 14:05:41 1753821429
>>1753730
1. Срать в файл с помощью plt.imsave. Вместе со снэпшотом в папочку класть результаты в виде картинки
Из массива в картинку все собирается с помощью np.concatenate, либо plt.subplot
2. В цикле рисовать все что нужно между plt.clf() и plt.pause(0.01) - для отладки удобно
3. Если у мамы модный, используй https://www.tensorflow.org/tensorboard/image_summaries и смотри все в браузере
Аноним 17/07/20 Птн 15:53:08 1753937430
>>1753821
В общем практически всё заработало как надо, даже с сохранением в файл каждые 5 эпох, но форма графика хоть и обновляется висит и сообщение не принимает.
https://pastebin.com/P6izRd7a
Аноним 17/07/20 Птн 16:32:20 1753968431
Может кто сказать чем в загруженных данных отличаются
textX от textY и trainX от trainY ?
Аноним 17/07/20 Птн 16:56:06 1753979432
>>1753968
Кажется разобрался, в X наборе данные, в Y метки
Аноним 17/07/20 Птн 18:28:28 1754040433
15945239917441.jpg 76Кб, 592x532
592x532
>>1753968
>>1753979
Пиздец какой. Раньше зумера вкатывальщики спрашивали, что такое сигма, сейчас скатились до вопросов что такое входные и выходные данные...
Аноним 17/07/20 Птн 19:13:59 1754081434
>>1754040
>Раньше зумера вкатывальщики спрашивали
Просто нейроговно уже никому не интересно
Аноним 17/07/20 Птн 19:33:01 1754088435
>>1754040
Это просто толстый обратный пуллинг.
Аноним 17/07/20 Птн 19:35:38 1754089436
>>1754040
А нахер ты им академические труды на английском советовал?
Поди разбери что за X и Y
Аноним 17/07/20 Птн 21:12:41 1754172437
Пиздос, делаю бустинга больше фичей, а качество только падает
Аноним 17/07/20 Птн 21:28:24 1754189438
>>1754172
>качество только падает
Кто бы мог подумать? Надо же, нейроговно не работает ой ой
Аноним 17/07/20 Птн 22:21:54 1754227439
>>1754189
>нейроговно
Бля, ты уже совсем не стесняешься обсираться, даун
Аноним 18/07/20 Суб 13:14:47 1754489440
>>1754172
Забавно, добавил своих, убрал несколько базовых фичей - качество растёт. Можно в современных бустингах как-нибудь задать приоритет по каким фичам желательнее разбивать в первую очередь?
Аноним 18/07/20 Суб 13:15:23 1754493441
>>1754172
Так чем больше фичей, тем хуже, если их не фильтровать. Гугли feature selection
Аноним 18/07/20 Суб 13:47:42 1754526442
15950312236062.jpg 60Кб, 491x489
491x489
>>1754489
>>1754493
Проблема автоматического обнуления ненужных фич была решена ещё в СССР (т.н "метод группового учёта аргументов" Ивахненко). Современные соевые алгоритмы так не могут. Все потому что в совке машобчиком занимались академики, а сейчас - блмлгбтабвгдсжв быдло, которое больше "думает" о том, чтобы в коде не использовались "расистские" термины типа blacklist.
Аноним 18/07/20 Суб 14:32:06 1754584443
аноны, расскажите плз о работе в комп вижене. у меня вот есть два года опыта прогером-прогером на си шарп и питон. Хочу перекатиться в вижн. Что нужно уметь? Так ли нужен матан, как об это пишут на hh? Про классику, вроде как, анону выше ответили, а вот что насчет sensor fusion? В рашке вообще есть это ваш фьюжн? Я вижу работу в зрении как сложные, интересные, требующие навыков проганься и знаний математики задачи. Это так? Может я вообще романтизирую? Короче очень прошу рассказать, если кто имеет опыт. остальные просьба не хуесосить плз.