-
2023-01-03 17:05:46+00:00
Что-то мне подсказывает, что разница в скорости будет не 2 раза. И что-то мне подсказывает, что нужно искать методы ускорения расчетов, но надо смотреть общую архитектуру
-
2023-01-03 16:59:04+00:00
Тот случай когда автокоррект успешно автообучился.
-
2023-01-03 16:58:47+00:00
Сейчас на 1070, считаю одномерные диффузии, они небольшие, но батч не вмещается в 8 гигабайт, поэтому 24гб будет отлично
и на получение +/- ясности жду примерно неделю, тк некоторые вещи нельзя измерить стандартными метриками - нужно смотреть/слушать самомму
-
2023-01-03 16:56:42+00:00
Трейд - автозамена
-
2023-01-03 16:56:28+00:00
А сейчас на чем считаете? И какая загрузка? Просто это мощная модель должна быть. И тогда нужно карту выбирать под параметры загрузки - память или мощность, что важнее.
-
2023-01-03 16:46:39+00:00
Не знаю что смущает, на самом деле))
Кажется обычный процесс экспериментов с обучением, и переписывания пайплайна
*не трейд, а трейн(обучение моделей)
-
2023-01-03 16:46:05+00:00
да просто найду того кому отправишь смс кто не в рф
-
2023-01-03 16:42:24+00:00
Вы уверены, что вам при такой загрузке нужна такая карта? У вас реально 100% мощности по 3-5 дней на трейд и новый через несколько часов? Или нужна другая карта-ы (мощнее), или это будет меньше загрузка/время
-
2023-01-03 16:39:10+00:00
Самая дешевая аренда на vast.ai, на сколько я знаю?
Возможно я неправильно посчитал экономику, но при арендных 0.4 $/h решил что лучше купить себе б/у карту
-
2023-01-03 16:35:31+00:00
Берите облако)) в таком режиме и вода не поможет. Хотя не представляю такую загрузку в реальности, это 99% загрузки в год
-
2023-01-03 16:31:52+00:00
Спасибо
Предполагаю что скорее всего трейны моделей по 3-5 дней с полной загрузкой, между трейнами паузы по несколько часов
С такими марафонами проживет хотя бы год без воды?
-
2023-01-03 16:22:19+00:00
Странный у вас вывод от форумов, FE - это Palit с турбиной. Зависит от оклада в корпусе, три кулера лучше, MSI и Asus чаще лучше китайцев (бывают исключения). Вопрос, что крутить и как активно - я редко кручу большие объемы, в итоге сижу на Quadro (памяти больше, чем в игровых), но они те еще печки. Для вашего выбора может тоже нужна вода или мощный охлад корпуса.
-
2023-01-03 16:07:47+00:00
Я из России и даже с vpn просит верификацию номера телефона. Обошли как это путь или просто из другой страны? Спасибо
-
2023-01-03 15:56:15+00:00
https://chat.openai.com/chat
-
2023-01-03 15:48:53+00:00
Подскажите на каком сайте вопрос задавали ? Сервисов интегрироаанных много просто
-
2023-01-03 14:35:21+00:00
Самая сложная проблема в датасатанизме проиллюстрирована на этом коротком учебном ролике: https://youtu.be/PrWfei9Nibw
-
2023-01-03 13:40:44+00:00
переместиться игнорируя другие (кроме как скрыть все, кроме нужного)
-
2023-01-03 13:40:17+00:00
ставишь бряк и ждешь пока дойдет до места, иначе как ты себе представляешь перемещение?
-
2023-01-03 13:37:11+00:00
не подскажите, можно ли в pycharm переместиться до определенного breakpoint
-
2023-01-03 13:18:27+00:00
И в Сербию, вроде
-
2023-01-03 13:14:53+00:00
епам в армении или грузии принимает джунов если пройдете тесты на английский и дс
-
2023-01-03 13:08:37+00:00
Правда, а зачем Джуна релоцировать. Еще и проблема с языком. В каждой стране Джуно вагон. Особенно в дата сайнс. Особенно в англоговорящих странах, для которых материалов для обучения просто вагон
-
2023-01-03 13:07:59+00:00
в Россию мне нельзя, а то посадят
-
2023-01-03 13:07:39+00:00
Россия :)
-
2023-01-03 13:07:26+00:00
Хороший вопрос, на который у меня нет ответа) Ставлю на то, что в ЕС будет без вариантов🙈
-
2023-01-03 13:02:50+00:00
А в какие страны и фирмы можно будет подаваться в качестве junior?
-
2023-01-03 13:01:58+00:00
Не хочу развеивать ваш энтузиазм, но обычно junior-специалистов крайне неохотно релоцируют🤔
Для компании это траты на непосредственно релокацию, ваше обучение/интеграцию, и ещё не факт, что вы смэтчитесь, поэтому компании обычно берут middle+ / senior ребят, которые уже знают, что к чему
-
2023-01-03 13:01:17+00:00
Мне кажется, он мало поможет )
-
2023-01-03 12:57:37+00:00
И сфера работы совершенно другая, морская инженерия
-
2023-01-03 12:57:05+00:00
Опыта работы по специальности нет.
-
2023-01-04 19:17:29+00:00
есть конеш, странный вопрос тут) Ваша же аналогия с велосипедом, если вы его разберете и будете сами его собирать станет ли вам понятнее как он работает?)
-
2023-01-04 19:03:27+00:00
https://github.com/AkiRusProd/numpy-nn-model я подобное делал
-
2023-01-04 18:09:14+00:00
выборка - 2 группы, в каждой - 0\1
-
2023-01-04 18:08:51+00:00
[stats]
всем привет! подскажите пж, что есть "оптимальный метод сравнения"? препод форевер "вне зоны доступа"
-
2023-01-04 17:45:50+00:00
Ын использует такой подход. Но в его курсах основа алгоритмов уже написана, и нужно только вставить ключевые блоки.
-
2023-01-04 17:42:35+00:00
потом , когда на собеседовании тебя спросят - разрабатывал-ли ты алгоритмы МЛ с нуля, ты сможешь гордо сказать - ДА!
-
2023-01-04 17:40:57+00:00
в этом мире все не имеет смысла) так что не переживайте
-
2023-01-04 17:40:37+00:00
Вот именно, что есть любопытство написать)) Но возможно это просто бестолковая затея
-
2023-01-04 17:40:25+00:00
Попробуй почитать Python и машинное обучение, тебе понравится с таким подходом
-
2023-01-04 17:39:31+00:00
самое лучшее что вы можете для себя сделать это быть любопытным)
-
2023-01-04 17:39:24+00:00
Пробовал писать, профит небольшой есть в понимании
-
2023-01-04 17:38:00+00:00
Кто нибудь здесь пробовал мл алгоритмы от руки писать на питоне? Вопрос не про изобретение велосипеда, а про лучшее понимание всех тонкостей. Есть ли польза, если в теории понимаешь как и что работает? Возможно, какие-то тонкости выясняются? Ну и в целом, стоит ли игра свеч?
-
2023-01-04 15:10:30+00:00
За 5 мин)
-
2023-01-04 15:10:14+00:00
Спасибо большое!
-
2023-01-04 11:28:46+00:00
у miracl6 еще можешь посмотреть
-
2023-01-04 11:28:33+00:00
У меня канал по МЛ. Вот видео для подготовки к собесу
https://youtu.be/kGhQedRDd3A
-
2023-01-04 11:27:05+00:00
У Хауди уже вышел видос «собес ДС за час»? )
-
2023-01-04 11:08:02+00:00
Всем привет!
Подскажите, годный и реально профитный канал для подготовки к собесу дс на ютубе. Видосов много, но там и хауди хо...
-
2023-01-04 10:55:48+00:00
Karpov courses здесь вроде любят, так вот, там есть трек hard ml для прошаренных
-
2023-01-04 09:57:11+00:00
растет
-
2023-01-04 09:14:07+00:00
Ок перепроверю
-
2023-01-04 09:13:06+00:00
в ноутбуке печатается roc auc только на трейне
-
2023-01-04 09:12:40+00:00
Ошибка в коде очень вероятно, возможно после трейна у меня класс не возвращает обученную модель. Хотя вроде возвращает. Запутался 🙃
-
2023-01-04 09:11:29+00:00
На валидации рост рога видно на каждой эпохе, я распечатываю значение.
-
2023-01-04 09:10:21+00:00
вы уверены что ошибки в коде нет? Самое важное правило, возьмите данных буквально 1-2 штуки и переобучите сеть, если идет переобучение значит все ок
-
2023-01-04 09:02:46+00:00
а точно roc auc на валидации растет? в ноутбуке по графикам виден только рост accuracy
-
2023-01-04 08:51:57+00:00
Тест показывает рок около. 0.5 не зависимо я делаю 2, 10 или 50 эпох
-
2023-01-04 08:49:49+00:00
Как будто обучения не было
-
2023-01-04 08:49:39+00:00
А тест не проходит
-
2023-01-04 08:48:55+00:00
Он тоже растёт за трейном, но меньше
-
2023-01-04 08:34:04+00:00
и насчет accuracy, по графикам видно что она растет на валидации, но становится ли она выше случайного угадывания?
-
2023-01-04 08:33:21+00:00
а как меняется roc auc на валидационном датасете в процессе обучения?
-
2023-01-04 08:27:20+00:00
Очень странно. Когда запускаю модель точность и roc auc растут. На тестах roc равен 0.5 независимо проходит две эпохи либо 10. Т.е как будто обучение не происходило. Может ли дело быть в loss
-
2023-01-04 08:23:18+00:00
Вроде нормально. Единственное лосс не тот.
-
2023-01-04 08:15:17+00:00
Вход нормирован? Похоже что нет
-
2023-01-04 07:52:01+00:00
как будто пытаюсь предсказывать через базовую предобученную не на челевых признакх модель..
-
2023-01-04 07:50:56+00:00
Всем привет! народ гляньте , почему то у меня ощущение что я тестируюсь не на обученной модели, хотя цикл обучения прошел норм. Eval включен.
-
2023-01-04 05:54:41+00:00
теперь знаю да
-
2023-01-04 05:54:36+00:00
Ну отлично, теперь знаешь 👍
-
2023-01-04 05:54:34+00:00
в конце концов
-
2023-01-04 05:54:31+00:00
не спотифай)
-
2023-01-04 05:54:08+00:00
в том что я не знал что из рф не работает, казалось бы вроде в этом сервисе нет чего то сверх
-
2023-01-04 05:53:39+00:00
Так и есть. А в чем вопрос?
-
2023-01-04 05:52:11+00:00
? так стать про то как зайти из рф
-
2023-01-04 05:50:42+00:00
Привет! Я правильно понимаю, что любая функция ошибки должна в идеале стремиться к нулю и на скриншотах ужасный ужас? https://ibb.co/4sTKzzX
-
2023-01-04 05:50:33+00:00
Как бы многие сейчас не работают в РФ.
-
2023-01-04 03:42:56+00:00
а он не работает в рф?
-
2023-01-04 03:30:19+00:00
Видел первые уроки от яндекса. Да, мне тоже показался курс очень лёгким и простым. Разработан для людей кто не знает об DS вообще ничего. Так же смотрел вводный от НИУ ВШЭ - такая же ситуация.
-
2023-01-04 03:21:27+00:00
Спасибо большое.
-
2023-01-04 01:39:18+00:00
https://habr.com/ru/post/704600/
-
2023-01-04 01:35:52+00:00
Всем привет! Хочу приобрести курс по Data Science - какой посоветуете и стоит ли вообще покупать? Большое желание приобрести курс от Яндекса, но программа кажется слабой - может, есть комментарии по нему?
Я сейчас учусь в вышке на 3 курсе и работаю там же программистом в центре искусственного интеллекта. Увлекаюсь ML примерно с 2018 года, некоторый опыт разработки алгоритмов и участия в соревнованиях есть, но прогресса не ощущаю.
Заранее спасибо!
UPD: Яндекс рассматривал, так как есть примеры людей, которых брали на стажировку и в дальнейшем на работу в хорошие компании после прохождения Практикума
-
2023-01-05 17:32:24+00:00
А я попробовал
-
2023-01-05 17:29:16+00:00
Скорее всего, нет :)
-
2023-01-05 17:29:05+00:00
для доисторических фотографий. думаешь справится с такими скриншотами?
-
2023-01-05 17:28:48+00:00
Есть же
-
2023-01-05 17:28:02+00:00
Пора написать нейронку, которая будет раскрашивать фотки
-
2023-01-05 17:27:41+00:00
Ставь палец, если любишь цветные картинки в книгах
-
2023-01-05 01:50:21+00:00
Да, стоит
-
2023-01-05 01:50:05+00:00
Да
-
2023-01-05 01:49:11+00:00
Я думаю лучше начать с использования готового, а опуститься ниже уже потом
-
2023-01-05 01:14:03+00:00
с нуля писать простенькие алгоритмы весело, но потом разнос по форме и фактажу начинается когда захочется слои из пай-торча с нуля написать.. :(
-
2023-01-06 23:58:03+00:00
Сходство работает как внутри датасета, так и с новыми экземплярами. Это статический алгоритм, он не учится.
-
2023-01-06 23:55:28+00:00
Текст придется в чиселки. А меры схожести векторов можешь брать хоть косинусное, хоть евклидово, Миньковский и тд
-
2023-01-06 22:37:04+00:00
в гугле что-то ничего не ищется, либо плохо вижу
-
2023-01-06 22:36:03+00:00
всем привет, нужно построить базовый поиск по схожести объектов (в датасете). Имеется 27 параметров, некоторые T/F, некоторые прям текстом. Так вот, можете подсказать название алгоритма в какую сторону копать? Знаю только, базовое косинусное сходство которое ведь работает внутри датасета, и оценивает схожесть между уже существующими объектами, а тут получается приходит новый
-
2023-01-06 18:21:53+00:00
нет, это агрегатор, а hh - отдельный портал.
-
2023-01-06 18:21:07+00:00
Это похоже на hh вроде
-
2023-01-06 18:20:09+00:00
Но собирать новые данные и обновлять прийдётся самостоятельно
-
2023-01-06 18:19:44+00:00
Что значит "ещё", эластик это техническое средство, а джубл - готовый продукт. Да, эластик норм.
-
2023-01-06 18:19:43+00:00
А что это за платформа?
-
2023-01-06 18:19:05+00:00
Спасибо! Мне посоветовали elastic search еще, он тоже норм?
-
2023-01-06 18:18:16+00:00
Вот, например https://jooble.org/
-
2023-01-06 18:12:42+00:00
Привет! Подскажите примеры реализации такой задачи пожалуйста.
У нас есть много наборов данных на разных платформах в разных форматах.
Нам нужно собрать все эти данные в одном месте, отобразить их и сделать доступными для поиска через пользовательский интерфейс.
Платформа должна периодически выполнять автоматические обновления.
-
2023-01-06 16:59:41+00:00
помогите пж
-
2023-01-06 16:29:38+00:00
читай документацию по мердж
-
2023-01-06 16:27:53+00:00
Рассчитывал увидеть такое
Df3
Data. Indic
01.2022 NaN
02.2022 NaN
03.2022 56
А получаются Data верно но значений Indic нет
-
2023-01-06 16:25:31+00:00
Привет, а что хочешь получить?
-
2023-01-06 16:23:05+00:00
Всем привет,может кто помочь в склеивании датафреймов.
Выглядят так
Df 1
Data. Indic
01.2022
02.2022
03.2022
Df2
Data. Indic
03.2022. 56
06.2022. 12
09.2022. 5
Я использую merge how left и по итогу дата верная как мне нужно от 0.1 как в 1 df но всех значений indic нет или NaN которые в df 2
-
2023-01-06 16:08:40+00:00
Кстати я встречал курс по sqlite, на нем коммерческие проекты делают, сейчас скину
-
2023-01-06 16:07:19+00:00
Смотря для какой задачи
-
2023-01-06 16:07:07+00:00
Скажите а что тогда лучше использовать?
-
2023-01-06 16:05:54+00:00
Разве что в домашних проектах, чтобы не сильно морочиться с серьёзной БД
-
2023-01-06 15:55:02+00:00
Я так понял, что вместе с питоном в основном sqlite используют
-
2023-01-06 15:50:03+00:00
Книга "Работа с MySQL, MS SQL Server и Oracle в примерах"
-
2023-01-06 15:50:03+00:00
Книга "Python: быстрый старт"
-
2023-01-06 15:49:46+00:00
Есть на торрентах курсы по sql прям валом
-
2023-01-06 15:49:36+00:00
вот только это
-
2023-01-06 15:48:27+00:00
Читал книгу от Алана(если правильно назвал) по sql, абсолютно не зашла
-
2023-01-06 15:48:13+00:00
вот
-
2023-01-06 15:47:25+00:00
Старый сайт с довольно тяжкими задачами + свой справочник
-
2023-01-06 15:47:00+00:00
Sql ex
-
2023-01-06 15:46:51+00:00
Чтобы задачи щелкать как семечки
-
2023-01-06 15:46:42+00:00
Хочется еще чего-то помимо
-
2023-01-06 15:46:35+00:00
Я прохожу его
-
2023-01-06 15:46:26+00:00
Бесплатный курс от карпова
-
2023-01-06 15:45:52+00:00
А что по sql можете порекомендовать?
-
2023-01-06 15:44:48+00:00
Я сейчас читаю Эла Свигарта, он говорит
-
2023-01-06 15:43:14+00:00
Кто говорит?
-
2023-01-06 15:42:29+00:00
Говорят стоящая книга
-
2023-01-06 14:37:00+00:00
для классифицированья
-
2023-01-06 11:55:01+00:00
Почему?)зачем?)
-
2023-01-06 11:54:10+00:00
feature это набор точек label метки они все однородны либо 0 либо 1 либо 2 соответственно
-
2023-01-06 11:45:06+00:00
Но в принципе, хуже этот параметр не сделает в любом случае
-
2023-01-06 11:44:38+00:00
После слова «но» ничего не понятно)
-
2023-01-06 11:26:25+00:00
Кто может подсказать имеет ли здесь какой то смысл параметр stratify в функции ? Как я понял он нужен чтобы соотношение между классами сохранялось при разбиении, но в моем случае ведь передаваемые данные имеют одну и ту же метку label1 label2 label3 значит этим параметром можно пренебречь в принципе?
-
2023-01-06 09:50:52+00:00
Всем привет! Можете посоветовать материалы для изучения GAN'ов и задачи Style Transfer'а
-
2023-01-06 08:46:49+00:00
Ребятушки,есть ли предел памяти в чатах телеграмма ,Я не о пределе одной отправки 2 Гб,а вместимость всего чата,какие идеи?
-
2023-01-08 21:24:49+00:00
[-100000000000000000, 9, 9, 9, 9, 9]
-
2023-01-08 21:24:11+00:00
ок, а пример?
я дошел до [1, 9, 9, 9, 9, 9] - но это частность
-
2023-01-08 21:22:48+00:00
Если одно минимальное значение устремить к минус бесконечности, среднее можно сделать сколь угодно малым. На значение квартилей это не повлияет.
-
2023-01-08 21:06:01+00:00
всем привет! подскажите пж, может ли быть среднее значение выборки меньше чем значение первого квартиля?
я думал, что при экспоненциальном (сдвинутом сильно влево) таки может, но нет - при скейле от 0.01 до 2 всё мимо :(
-
2023-01-07 18:39:29+00:00
Хорош, самый охеренный диплом
-
2023-01-07 18:37:55+00:00
премного благодарю!
-
2023-01-07 18:37:28+00:00
есть HIP / mCUDA / OpenCL
-
2023-01-07 18:37:18+00:00
https://www.gpueater.com
-
2023-01-07 18:37:16+00:00
для амд нет куды же https://www.reddit.com/r/Amd/comments/kmdtlf/why_is_there_no_cuda_alternative_on_amd/
-
2023-01-07 18:37:16+00:00
HPC, беру хардварные компоненты (значения кешей, bandwidth, ..) и запускаю тест на производительность
-
2023-01-07 18:36:11+00:00
Я хотел спросить, что там у тебя за диплом / на что влияет, какая машинка
-
2023-01-07 18:35:07+00:00
можешь и сюда писать, мб кто-то еще "под кат" придет
-
2023-01-07 18:34:52+00:00
Интересно даже какая у тебя обстановка, напишу в лс?
-
2023-01-07 18:34:21+00:00
мне нужно сначала протестить, потом запустить
—
насчет симуляторов - не знаю, сейчас поищу
-
2023-01-07 18:33:33+00:00
А тебе именно хочется уже запускать или протестить?
Бывают симуляторы?
-
2023-01-07 18:32:18+00:00
никак, у меня тема диплома завязана на АМДшные карты, и во время преддипломной всё писалось на MI100, а для диплома было бы неплохо взять несколько разных архитектур карточек (и разных генераций офк)
-
2023-01-07 18:30:48+00:00
А как вы до этого делали?
-
2023-01-07 18:29:52+00:00
Или amazon
-
2023-01-07 18:29:31+00:00
А selectel?
-
2023-01-07 18:29:22+00:00
но за ссылку 👍
-
2023-01-07 18:29:16+00:00
мне не сколько грант нужен (деньги на аренду есть), а только доступ :(
-
2023-01-07 18:28:30+00:00
Макс, можешь это почекать
-
2023-01-07 18:28:03+00:00
Если облачная технология подойдет, то тут можно грант до 1 млн.рублей получить, плюс там выдается на определенном этапе архитектор бесплатно, который поможет спроектировать структуру SAAS продукта https://cloud.yandex.ru/cloud-boost
-
2023-01-07 18:25:37+00:00
всем привет! я знаю, что для МЛ можно арендовать GPU и удаленно запускать модельки.
Есть ли сайты, на которых можно арендовать конкретную карту конкретной модели? В гугле кроме Титанов и Нвидий ничего и нет, а мне АМД нужны
-
2023-01-12 21:20:50+00:00
всем привет, кто с selenium знаком, по факту ведь неважно откуда парсинг будет происходить, ему же только драйвер нужен? хочу узнать заранее, ничего не отвалится ли на серваке))
-
2023-01-12 20:15:15+00:00
Ну не всем видео удобнее книги
-
2023-01-12 20:07:46+00:00
мда, сложновато, пойду ещё почитаю про p-value
-
2023-01-12 20:02:52+00:00
сто лет не видела вероятность с % 😁 но в целом да, чем меньше трэшхолд (альфа), тем сложнее получить p меньше него и опровергнуть H0
-
2023-01-12 20:00:21+00:00
то есть, шанс на получение p-value = 0.1%, а этого очень сложно добиться. Поэтому и получается выбор 0.001?
-
2023-01-12 19:59:52+00:00
если это книга, то видео на ютубе скорее всего покроют основные темы быстрее и доступнее)) не в обиду мастодонтам статистики будет сказано
-
2023-01-12 19:58:57+00:00
на каком этапе щас?
-
2023-01-12 19:57:47+00:00
Статистики Гмурмана вполне хватит для покрытия основных тем на начальных этапах?) Тоже курс Карпова прохожу на степике этот
-
2023-01-12 19:57:35+00:00
кажется, я понял
-
2023-01-12 19:56:57+00:00
звучит как философия)
-
2023-01-12 19:56:11+00:00
потому что получить p-value меньше 0.001 сложнее и соответственно опровергнуть H0 сложнее, соответственно меньше вероятность сделать ошибку если на самом деле она верна. с меньшим a мы "более уверены", что результат не был получен случайно
-
2023-01-12 19:55:14+00:00
Самое низкое p-value из всех предложенных. Меньше всего шансов ошибиться, отклоняя нулевую гипотезу
-
2023-01-12 19:54:03+00:00
почему мы тогда выбираем первый вариант
-
2023-01-12 19:53:45+00:00
в последней строчке написано "Если в определенной ситуации весьма рискованно отклонить нулевую гипотезу, когда она на самом деле верна, то лучше использовать показатель "
-
2023-01-12 19:53:11+00:00
Тем больше вероятность, что проверяемое распределение сложилось случайно, а не в силу того, что верна альтернативная гипотеза.
-
2023-01-12 19:52:06+00:00
Чем больше p-value, тем вероятнее, что нулевая гипотеза верна
-
2023-01-12 19:50:57+00:00
Мне кажется, полезное упражнение, чтобы понять, что означает p-значение и как оно связано с альфой - смоделировать распределения p-значений при H0 и H1
-
2023-01-12 19:48:02+00:00
совсем разное или я уже что то не понимаю
-
2023-01-12 19:47:46+00:00
так ты говоришь "с меньшем значением альфа мы с большей уверенностью отклоняем H0", а он говорит "с меньшем значением альфа, меньше шансов отклонить достоверную нулевую гипотезу"
-
2023-01-12 19:45:20+00:00
это не противоречит тому, что я написала)) получить p меньше 0.01 сложнее, чем меньше 0.05 - не важно, верна H0 или нет
-
2023-01-12 19:42:15+00:00
тут вообще прямо противоположное написано, хотя лайков под комментом много стоит(читай подчеркнутый текст)
-
2023-01-12 19:39:16+00:00
мы не можем отклонить альтернативную гипотезу H1 в принципе :) грубо говоря, с меньшем значением альфа мы с большей уверенностью отклоняем H0 - например, в медицинских тестах часто используется 0.01 вместо 0.05
-
2023-01-12 19:32:39+00:00
p-value, кто то может объяснить, когда значения альфа стремится к 0, то мы с большей вероятностью отклоняем 0-ую гипотезу или же наоборот, отклоняем 1-ую гипотезу?
-
2023-01-12 18:46:40+00:00
Звучит интересно, возьму на заметку
-
2023-01-12 18:46:18+00:00
Автоматизация большого числа мл обучений через airflow?
-
2023-01-12 18:27:54+00:00
😅 спасибо...
-
2023-01-12 18:25:56+00:00
В нашем мире все связано,у вас получится.
-
2023-01-12 17:52:33+00:00
Или моя работа вообще из другой оперы и не подойдёт никак туда
-
2023-01-12 17:51:40+00:00
Всем привет, посоветуйте шото пожалуйста. По работе работаю с etl инструментами, informatica, airflow (миграции, пинание данных туда сюда). Нужно писать магистерскую и научник оч настойчиво предлагает взять что то на тему датасатаны или мл. Мой стек можно как то туда приплести?
-
2023-01-12 17:24:29+00:00
окей, спасибо
-
2023-01-12 17:23:59+00:00
Так скинули что надо
-
2023-01-12 17:23:42+00:00
в пдф нельзя менять шрифт, вот в чем прикол
-
2023-01-12 17:23:10+00:00
Ты размером шрифта подгони сколько тебе страниц надо и читай спокойно
-
2023-01-12 17:19:36+00:00
Тем более это офсет
-
2023-01-12 17:18:38+00:00
Бля чел это старое издание,Я тебе скинул 2022 года
-
2023-01-12 17:16:23+00:00
посмотрел в магазинах и там в описании 350 страниц
-
2023-01-12 17:16:02+00:00
С чего ты взял что там 300 страниц?
-
2023-01-12 17:15:10+00:00
не то, в оригинале около 350 страниц, а тут аж 675
-
2023-01-12 17:14:17+00:00
Попробуй это
-
2023-01-12 17:09:24+00:00
не, тут 81 страница, это только ознакомительный фрагмент
-
2023-01-12 17:08:52+00:00
окей. щас
-
2023-01-12 17:08:40+00:00
Попробуй это
-
2023-01-12 17:00:49+00:00
потому что в ней можно редактировать шрифт на телефоне и менять фон и т.д
-
2023-01-12 16:59:19+00:00
Почему именно Epub?
-
2023-01-12 16:33:12+00:00
У кого то есть книга Голая статистика в Epub формате?
-
2023-01-12 15:07:05+00:00
так тут в проекте 0(ноль) строчек кода. Что вы хотите открыть в pycharm? Вся эта репа - файлик с информацией, немного картинок, и ссылки на гуглодиск. Качаете с гуглодиска и можете обучаться
-
2023-01-12 07:28:40+00:00
Как проект из гитхаба перенести в гугл колаб или пайчар. Есть модель по детекции дронов на YOLO, я его склонировал и отдельно скачал в пайчар, но зависимости не подтягиваются, постоянно ругается. С другими такая же история. Может кто знает мануал как это делать?
Хотел вот этот проект протестировать https://github.com/Maciullo/DroneDetectionDataset
-
2023-01-11 20:21:08+00:00
и пайплайнами еще
-
2023-01-11 20:20:13+00:00
особенно с деплоем
-
2023-01-11 20:19:45+00:00
Всем привет друзья, а кто-нибудь использует Sagemaker для создания/деплоя ML моделей в AWS? Было бы интересно было бы узнать, какие там есть проблемы на ваш взгляд)
-
2023-01-11 18:42:23+00:00
mathprofi.ru клёвый сайтик, но теория крайне неформальная.
Ефимов-Поспелов задачник в 4 томах.
По теории лучше лекции, на teach-in они с красивыми конспектами
-
2023-01-11 18:11:05+00:00
Кто-нибудь пробовал игратся с minGPT/nanoGPT ? ( https://github.com/karpathy/minGPT )
Как оно по-сравнению с chat.openai ?
-
2023-01-11 17:35:32+00:00
Да в итоте зарефачил, размер сохраненных весов уменьшилось, но скорость и потребление памяти на трейне не изменились
-
2023-01-11 17:32:20+00:00
вот пример, как вручную для одного матча, но их тысячи
-
2023-01-11 17:31:38+00:00
Ресерч код же) рефрактори
-
2023-01-11 17:31:31+00:00
Привет! подскажите, плиз, как в таблице взять один матч, затем найти две предыдущие встречи команд, результат первой встречи записать в столбец x11, второй - в x12? И так далее пройтись по всем матчам? Т.е. нужно найти именно историю двух последних встреч
-
2023-01-11 16:04:41+00:00
Всем привет, хотел попросить помощи с SQL запросом. Есть две таблицы, в обеих лежат ID и даты, их надо сджойнить по равенству ID и по ближайшей ранней дате во второй таблице. Пример:
Select *
From table1 as A
Left join table 2 as B
On A.ID = B.ID and
A.Date <= B.Date - не сработает, потому что присоединит все даты из B меньшие A.Date, а нужно лишь самую раннюю
(в таблице B может не быть той же даты, что и в А, в таком случае нужно присоединить самую ближайшую раннюю дату для этого ID из B)
Подскажите, как это сделать?
-
2023-01-11 14:49:45+00:00
Если ты не переопределяешь модель, то должна дообучаться конечно.
При аугментации получаются аугментированные картинки, которые создаются на основе базовых и по идее множество аугментированных картинок должно быть больше (при этом трансформации могут и не примениться к картинке).
Я вижу это так: аугментируешь n картинок в N, N > n, обучаешь на большем датасете.
Меня не слушай особо, я не эксперт.
Не бейте если не прав))
-
2023-01-11 14:41:35+00:00
Код дополнительной информации тут не даст
-
2023-01-11 14:33:10+00:00
странно получается, вопрос задан о том работает код, а самого кода нет
-
2023-01-11 14:19:36+00:00
И тогда есть ли смысл учить модель сначала на обычных, потом на аугментированных данных или сразу надо на данных после применения torchvision.tramsforms?
-
2023-01-11 14:18:29+00:00
Изучаю CNN на торче и столкнулся с таким вопросом: когда я тренирую модель на обычном датасете, а потом аугментирую его через torchvision.tramsforms и учу эту же модель на аугментированном датасете - модель учится заново или она дообучается?
И при аугментации датасет таким способом что именно получается: исходные картинки + аугментированные или только аугментированные?
-
2023-01-11 13:36:02+00:00
Можно попробовать
https://stepik.org/course/95/promo
Хотя больше похоже, что нужно что-то вроде
https://practicum.yandex.ru/math-for-da-ds/
-
2023-01-11 13:24:51+00:00
Да любой университетский учебник, например, Кудрявцева. Чтобы попрактиковать есть задачник Демидовича с решебником.
-
2023-01-11 13:12:36+00:00
В университете прошла программу выш мата, теор вер и мат статистики, но необходимо повторить и по практиковать
-
2023-01-11 13:08:39+00:00
Вы прям с козырей ходите
На такой общий запрос очень сложно рекомендовать что-то конкретное
Как минимум стоит описать с какого уровня собираетесь подтягиваться и какая цель в итоге
-
2023-01-11 13:05:23+00:00
Подскажите учебники или курсы, что б подтянуть матан
-
2023-01-11 13:05:22+00:00
https://pandas.pydata.org/pandas-docs/stable/user_guide/timeseries.html
Вот наверное лучше ссылка, как раз гайд по работе с датами
-
2023-01-11 13:03:53+00:00
А да, и это тоже, ты на вход в fromtimestamp передаешь целую колонку, а должен передавать integer или string (не помню точно уже что)
-
2023-01-11 13:03:34+00:00
https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.Timestamp.html
Скорее всего, тут тот же fromtimestamp или fromunixtimestamp
-
2023-01-11 13:02:22+00:00
О, старое-доброе "Кто ни будь" в три слова, давненько я такого не видел
Попробуй посмотреть методы пандаса для работы со временем, datetime, насколько я помню, не работает со колонками
-
2023-01-11 13:01:58+00:00
Не помогает
-
2023-01-11 13:01:19+00:00
потому что ты импортишь datetime как сущность, а потом еще datetime из datetime как уже другую сущность, но с тем же названием
-
2023-01-11 13:00:08+00:00
Убери from datetime import datetime
-
2023-01-11 12:57:32+00:00
Кто ни будь поможет решить задачу
Имеется признак timestamp там значения в формате unix(как то так пишется) т.е значения в формате float, нужно перевести в формат '%Y-%m-%d %H:%M:%S'
-
2023-01-11 12:31:47+00:00
SANS 595: Прикладная наука о данных и машинное обучение. Мягкая книга 2023 года
https://terabox.com/s/1J5OK210MmoPDqaZxKu6mUA
-
2023-01-11 12:30:16+00:00
Хаха, книга про киберсекрьюти в рар, кто-то скачал?)
-
2023-01-11 12:20:46+00:00
SANS595:Applied Data science and Machine Learning. 2023 Soft Book
https://terabox.com/s/1J5OK210MmoPDqaZxKu6mUA
-
2023-01-11 12:10:55+00:00
Што там?
-
2023-01-11 12:09:33+00:00
Привет! Меня распирает от эстетического совершенства алгоритма, который я пишу для сложной задачи уже 3 дня.
Все таки математика - это очень красиво, а прога как мост в математику для людей без мат образования - это очень крутой мост.
И все это благодаря Дата Саенсу - который их объединил.
-
2023-01-10 21:27:19+00:00
[offtop]
такой вопрос - ради прикола задал 1:1 запросы любимому чатГПТ, и ответ на русском в 2-4 раза меньше по объему, чем англ. Это от размера корпуса слов зависит или там еще что-то запрятано?
-
2023-01-10 18:52:38+00:00
Нормального быстро-халявного решения для всяких 4elovek (опять же варианты ck, c) я, к сожалению, не нашел в свое время :) (кроме своих словарей с возможным последующим обучением своих сетей, всяких замен сочетаний). Задача не то чтобы актуальна, но решение было бы полезно. Но самое сложное - это детектить тот факт, что это транслит:). То есть детектить язык оригинала и то, что он транслит или нет (такой фигнёй страдают во многих языках не латинского словаря). Есть возможные подходы, но опять же без своего глубокого ресерча проблему врятли решить. Просто языки детектить норм. Тут по сути новый язык надо рассматривать
-
2023-01-10 16:08:58+00:00
Всем привет)
Сейчас разбираю один репозиторий и наткнулся на дублирование весов unet
Прикрепляю грубый пример того как все устроено
Точно скажу что на выходе модель с 3 одинаковыми unet
Предполагаю что это съедает дополнительную память и, скорее всего, тормозит трейн и инференс
Хочу уточнить, все ли здесь окей или нужно рефакторить чтобы unet был только в одном месте и не дублировался?
Вместе с ema получается 9 одинаковых unet
-
2023-01-10 15:28:18+00:00
Ну например бренды всякие, люди могут некорректно писать их на русском
-
2023-01-10 15:25:53+00:00
Для векторизации текстов нужен большой корпус текстов на транслите 🤷♂️
-
2023-01-10 15:25:42+00:00
всрато типа 4 = "ч"? тогда только вручную словариком мб
-
2023-01-10 15:20:26+00:00
типа какое-то векторное сравнение без транслитирации, но опять же как оно будет работать
-
2023-01-10 15:19:49+00:00
ну я так и думал сделать, но думал что еще есть более сложный и хитрый вариант
-
2023-01-10 15:19:40+00:00
ага, много ошибок при транслите
-
2023-01-10 15:19:19+00:00
Думаю, всё равно нужно сначала транслитерировать на один алфавит, а потом всякое фаззи-сравнение пробовать
-
2023-01-10 15:18:36+00:00
Сомневаюсь, что мультилингвал натренирован на транслите
-
2023-01-10 15:13:34+00:00
Если всрато написан можно мультилингвал bert попробовать наверное.
-
2023-01-10 15:11:10+00:00
да он же еще всрато может быть написан
-
2023-01-10 15:10:04+00:00
транслит либа была, при помощи нее конвертируешь и сравниваешь
-
2023-01-10 15:00:39+00:00
пример: Молоко = Moloko
-
2023-01-10 14:59:53+00:00
привет как можно сравнить два текста если один на кирилице а второй на латинице ? может есть какие-то библиотеки чтобы это быстро сделать
-
2023-01-10 10:26:48+00:00
Спасибо помогло
-
2023-01-10 10:22:33+00:00
float(value.values[0])
если это pd.Series
возможно есть покороче вариант)
-
2023-01-10 10:21:33+00:00
Подскажите как вытащить это значение
-
2023-01-10 09:55:59+00:00
SANS595:Applied Data science and Machine Learning. 2023 Soft Book
https://terabox.com/s/1J5OK210MmoPDqaZxKu6mUA
-
2023-01-09 18:14:28+00:00
https://www.youtube.com/watch?v=llfY2SWiWFU
-
2023-01-09 15:50:35+00:00
А в данной схеме NNAPI используется? Не похоже, не пробовали этот вариант? Сохранение через торч скрипт лайт версии и потом добавить в градле нужные модули и читать файл напрямую, без явного nnapi usage
https://pytorch.org/mobile/android/
-
2023-01-13 21:34:02+00:00
Возможно, в положительной обратной связи
-
2023-01-13 21:31:23+00:00
ошибку нашел, понял еще меньше.
Верный код:
# Задаем размер шага
learning_rate = 0.001
# Задаем количество итераций
num_iter = 1000
# Задаем стартовые значения
x1 = ..
x2 = ..
# Задаем начальные значения градиента
grad1 = 0
grad2 = 0
# Проходим цикл итераций для обновления значений х1 и х2
for i in range(num_iter):
# Вычисляем значения градиента для текущих значений х1 и х2
grad1 = 6 * x1 + 42
grad2 = 4 * x2 + 12
# Обновляем значения х1 и х2 в соответствии с градиентным спуском
x1 = x1 + learning_rate * grad1
x2 = x2 + learning_rate * grad2
# Выводим обновленные значения х1 и х2
print(x1, x2)
С learning rate < 1 все ок - ответ верный. Когда learning rate = 1, то алгоритм улетает в -Бесконечность. В чем прикол?
-
2023-01-13 21:29:36+00:00
А градиентный подъём, так сказать?
-
2023-01-13 21:29:26+00:00
Ну так это правильно :)
-
2023-01-13 21:29:13+00:00
который минимум ищет - да, верно
-
2023-01-13 21:28:55+00:00
То есть, градиентный спуск уходит фактически в бесконечность?
-
2023-01-13 21:25:24+00:00
действительно, затупил
-
2023-01-13 21:24:43+00:00
Переменные у этой функции где?
-
2023-01-13 21:24:01+00:00
Максимум функции: f(x1, x2) = -11948189333493392077716602983257838541933284228223226203515838080381301694006605899747669602522838170404516592806217963794583088107894043648235
x1 = 63108872417680944432938285222622898373856514808721840381622314453124993
x2 = 5669152728052124641401072427421833999723182742008
на вольфрам альфе проверяю (фото)
-
2023-01-13 21:23:03+00:00
А какой даёт?
-
2023-01-13 21:22:03+00:00
всем привет! подскажите пж, как мне при помощи град.спуска найти ((максимум))?
минимум находится изи, но изменение x -= learning_Rate * grad_x1 на "+=" требуемого результата не дает
-
2023-01-13 21:05:04+00:00
Смотрите еще события в этом канале. В течение недели звонки проводятся для просто пообщаться
-
2023-01-13 21:04:51+00:00
Ага, нашел, благодарю
-
2023-01-13 21:04:37+00:00
В 16 по мск. Чат junior_ds, там все материалы полезные. В том числе и для опытных
-
2023-01-13 21:01:59+00:00
Спасибо, а в котором часу проводятся звонки?
-
2023-01-13 21:00:35+00:00
https://platform.stratascratch.com/coding?code_type=1 и у Карпова офигенный симулятор sql бесплатный
-
2023-01-13 20:47:08+00:00
В это воскресенье еще будем решать задачи на формулу Байеса . Почитай, интересная вещь
-
2023-01-13 20:46:28+00:00
Учебник Кремера или Гмурмана
-
2023-01-13 20:45:48+00:00
Начать с теории вероятностей. Качает разум
-
2023-01-13 20:44:36+00:00
Да любой учебник откройте и прорешайте.
-
2023-01-13 20:43:47+00:00
Люди, а где можно взять и самостоятельно потрерироваться, про аналитику, задания, может сайты какие-то есть? Кроме sql-ex.ru
-
2023-01-13 20:42:43+00:00
В это воскресенье будет доклад про общие линейные модели. Для аналитика полезно
-
2023-01-13 20:39:34+00:00
Посмотрим, мало ли вынесу для себя информацию, как ещё недоаналитик
-
2023-01-13 20:37:34+00:00
Нужен чат только для новичков, чтобы были примерно все одного уровня, и друг другу рассказывали фишки. В дискорд канале data breakfast по воскресеньям проводим такие звонки, где обсуждаем базовые идеи, методы в мл, анализе, математике. Слушаем доклады от опытных коллег. Нужно залетать в сообщество (Не реклама)
https://discord.gg/data-breakfast-748059315239256156
-
2023-01-13 20:29:16+00:00
Да.
-
2023-01-13 20:28:58+00:00
В чате на 6 тысяч человек нежелательно спрашивать то, что просто нагуглить
-
2023-01-13 20:28:30+00:00
👀 А тут нельзя основы статистики?
-
2023-01-13 20:28:06+00:00
Только лучше в другом чате
-
2023-01-13 20:28:05+00:00
типа такого
-
2023-01-13 20:27:50+00:00
Например, критерий Стьюдента.
-
2023-01-13 20:26:29+00:00
мда, щас в голове обезьянка, которая бьёт игральные барабаны
-
2023-01-13 20:25:17+00:00
Первая картинка — ошибка первого рода, когда отвергнута верная нулевая гипотеза (почти всегда она формулируется в терминах отсутствия эффекта/различий/связи, вторая картинка — ошибка второго рода, когда принята ложная нулевая гипотеза.
-
2023-01-13 20:23:04+00:00
В общем случае мы тестируем нулевую гипотезу. Для этого мы конструируем какой-либо статистический тест, по сути, просто формулу, в результате которой получаем определённые значения. Все вероятные значения собираются в распределения, то есть, какие-то результаты теста (их ещё называют статистикой теста) более вероятны, а какие-то менее вероятны.
Когда мы посчитали статистику теста, мы смотрим, где располагается на распределении это число (см. картинку), например. Вот эта вероятность и есть p-value.
Таким образом, p-value — это вероятность получить наблюдаемые или ещё более экстремальные значения статистики теста при условии, что верна нулевая гипотеза.
Из этого элементарно выводится то, что мы можем ставить отсечение альфа, то есть такую вероятность допустить ошибку первого рода, которая кажется нам допустимой. Если p-value меньше альфы, то мы говорим, что не отвергаем альтернативную гипотезу, потому что вероятность появления наблюдаемого значения статистики при условии, что верна нулевая гипотеза, критически маленькая.
-
2023-01-13 20:21:00+00:00
Уже читал, но особо ничего не поменялось. Щас ещё раз прочитаю, может, что новое проясниться
-
2023-01-13 20:14:36+00:00
https://habr.com/ru/company/stepic/blog/250527/
-
2023-01-13 20:13:13+00:00
Не совсем так.
-
2023-01-13 20:12:48+00:00
Это еще площадь под графиком. И надо погуглить геометрическую вероятность
-
2023-01-13 20:11:00+00:00
ну да, наверное, надо поиграться с ползунками, чтобы пришло понимание
-
2023-01-13 20:10:29+00:00
ключевое слово "рискованно". а так обычно 0,05 принимают
-
2023-01-13 20:10:13+00:00
На курсе Карпова есть ссылка на сайт по расчету пи велуе. Прокрути его. Осознание должно прийти, что это вероятность встретить такие, либо еще более выраженные отклонения
-
2023-01-13 20:09:31+00:00
я не могу понять, почему не 0.5
-
2023-01-13 20:09:06+00:00
но суть до конца все равно не понял
-
2023-01-13 20:08:56+00:00
та я и на англ смотрел
-
2023-01-13 20:08:37+00:00
P-value можно спрашивать, потому что на русском мало инфы о нем кроме Карпова :)
-
2023-01-13 20:07:56+00:00
Всегда стараюсь говорить, чтобы погуглили, потому что это для новичка неочевидно, и он старается спрашивать людей. Но со временем это придет. Вношу свой вклад в образование людей
-
2023-01-13 20:07:52+00:00
чего только стоит p-value, вчера долго разбирал, но так и не понял, почему при очень маленьком p-value шанс на отклонение H0 минимален, когда сказано наоборот, что при очень маленьком p-value вероятна H1 гипотеза
-
2023-01-13 20:06:38+00:00
Поэтому и не стесняйтесь спрашивать, почти всегда среди десяти сообщений о том, что надо погуглить, найдётся один человек, который пояснит.
-
2023-01-13 20:05:57+00:00
Это так.
-
2023-01-13 20:05:33+00:00
для вас эти вопросы кажутся лёгкими, но для новичка они сложные
-
2023-01-13 20:04:38+00:00
Не стесняйтесь спрашивать, многие будут вас отшивать и говорить, что спрашивать плохо, надо гуглить, и они правы, потому что в целом самые базовые вещи можно нагуглить путём вбивания слова в поиск. Но сложные и неочевидные вещи всегда рады обсудить обычно.
-
2023-01-13 20:04:10+00:00
и собираюсь вообще проходить два курса
-
2023-01-13 20:03:29+00:00
питон
-
2023-01-13 20:03:23+00:00
не, на R я не планирую писать
-
2023-01-13 20:02:57+00:00
Вот ещё очень полезные слайды из моего курса, раз уж вы на R будете писать на курсах этих трёх. 👍
-
2023-01-13 20:02:11+00:00
по факту, можно всё найти в инете, но раз начался у нас разговор, то я решил на эйфории поспрашивать вопросы)
-
2023-01-13 20:00:47+00:00
Это все гуглится, на будущее
-
2023-01-13 20:00:34+00:00
Да, и пробуйте посмотреть в той же Википедии незнакомые слова, мне помогало в своё время.
-
2023-01-13 20:00:22+00:00
сейчас на первом
-
2023-01-13 20:00:16+00:00
а я как раз таки и прохожу эти курсы
-
2023-01-13 20:00:01+00:00
https://stepik.org/course/76
https://stepik.org/course/524
https://stepik.org/course/2152
-
2023-01-13 19:59:36+00:00
окей, в ближайшие дни прочту её
-
2023-01-13 19:59:16+00:00
Найдите остальную книжку от этой картинки - там на первых страницах все определения.
-
2023-01-13 19:59:13+00:00
типа номинативные?
-
2023-01-13 19:58:50+00:00
Это когда вы, например, смотрите на собак и говорите: "Эта рыжая, это красная, это белая". Получается переменная из значений: "рыжий", "красный", "белый".
-
2023-01-13 19:58:43+00:00
Советую почитать академическую литературу 👍🏻
Теория вероятностей и математическая статистика. Кремер, либо любой другой автор которого найдете
-
2023-01-13 19:58:00+00:00
а категориальные признаки это что?
-
2023-01-13 19:57:30+00:00
Потому что дисперсия/стандартное отклонение рассчитываются именно для количественных признаков. Для категориальных признаков эти понятия бессмысленны в общем случае.
-
2023-01-13 19:57:09+00:00
так, если это буквы, то это уже никакая не последовательность чисел)
-
2023-01-13 19:56:34+00:00
Это могут быть не числа. Но в контексте определения это числа. Как взять среднее значение от букв?
-
2023-01-13 19:56:14+00:00
а почему это последовательность чисел?
-
2023-01-13 19:55:10+00:00
Признак - это последовательность чисел
-
2023-01-13 19:50:48+00:00
Да, понял, спасибо огромное
-
2023-01-13 19:49:28+00:00
У вас есть вариационный ряд, например: 7.55 10.33 6.12 9.29 7.03 3.17 11.26 16.51 16.10 5.64
Предположим, что это вес собак.
Вы находите среднее, потом это среднее вычитаете из каждого значения, возводите каждую разность в квадрат, всё это суммируете, а потом делите на количество значений за вычетом единицы (в общем случае, иногда не вычитают, но об этом потом узнаете). Получается "дисперсия" (19.16). Потом от неё берёте корень квадратный, получается вот это самое среднеквадратическое отклонение (4.38).
Таким образом, эти самые "x" — это значения переменной, которые вы получаете в результате измерений.
-
2023-01-13 19:21:16+00:00
вот нашёл картинку, я так понимаю, это какие то значения, которые являются x-ами
-
2023-01-13 19:20:29+00:00
Это циферка в столбце, отвечающем за признак
-
2023-01-13 19:19:37+00:00
потому что часто вижу этот термин, я понять его не могу
-
2023-01-13 19:17:44+00:00
это хорошо, но можете ли вы сейчас сказать, что это означает?)
-
2023-01-13 19:17:19+00:00
Книга статистика и котики Вам поможет)
-
2023-01-13 19:06:30+00:00
Среднеквадратическое отклонение - на сколько в среднем значения признака отклоняются от средней величины по выборке. Такой вопрос, что в данном контексте означает "значение признака"?
-
2023-01-13 18:59:35+00:00
Ребята, может тут есть, кто хочет поучаствовать в разных стартапах/проектах? Может даже выиграть грант😄 Разные области, но больше приветствуется ИИ. Было бы круто собрать команду)
-
2023-01-13 18:53:18+00:00
Просто именные параметры функций в питоне, они там используют patch_kw = dict(patch_size=5, # 5x5 patches patch_distance=6, # 13x13 search area channel_axis=-1)
-
2023-01-13 18:43:36+00:00
Не пробовала, спасибо , но , к сожалению, не знаю, как работать с **patch_kw)
-
2023-01-13 18:26:59+00:00
Вот этот пробовали? https://scikit-image.org/docs/stable/auto_examples/filters/plot_nonlocal_means.html
-
2023-01-13 18:07:44+00:00
Добрый вечер! Подскажите, пожалуйста , где можно найти код,с помощью которого можно почистить изображение от шума? Пробовала это , но шум остался(https://www.youtube.com/watch?v=G39dVoiivZk
-
2023-01-13 17:19:10+00:00
В последнее время загорелся этим , хотелось бы сменить сферу деятельности и стать аналитиком
-
2023-01-13 17:18:35+00:00
У меня вышка техническая есть, но не с айти связано
-
2023-01-13 16:54:13+00:00
могут, но в той же Москве это по моему опыту и опыту знакомых стало большой редкостью, больше сморят на опыт, умения, знания
-
2023-01-13 16:54:04+00:00
Ахах, жизненно, спасибо
-
2023-01-13 16:53:48+00:00
смотря что считать ВО, если 5 лет обучения, написание курсовых, диплома - есть, если защиту и получение диплома - то нет)
-
2023-01-13 16:52:41+00:00
вот да интересно могут ли человека без высшего(не студента) посылать
-
2023-01-13 16:51:50+00:00
А в принципе у вас есть вышка?
-
2023-01-13 16:42:49+00:00
редко, я работал в сбере без диплома, при устройстве в яндекс так же не потребовалось, а мелкие выпендрежники "ой у вас нет диплома" пусть идут лесом.
-
2023-01-13 16:41:31+00:00
Вот интересно кста, могут ли в процессе трудоустройства "срезать" из-за отсутствия вышки, при наличии необходимых знаний и проектов
-
2023-01-13 16:37:48+00:00
Или чтобы стать аналитиком обязательно нужна корочка
-
2023-01-13 16:37:37+00:00
Это все можно самостоятельно освоить и не нужно покупать разные курсы,да?
-
2023-01-13 16:36:58+00:00
Всем приветы, пистолеты!
Напомните, пжлст, встроенная кнопка нумпая с трафаретом.
нужно один массив наложить поверх другого, а что за функция вылетело из котелка
-
2023-01-13 15:06:51+00:00
Спасибо!
-
2023-01-13 13:50:10+00:00
https://medium.com/nuances-of-programming/%D1%81%D0%B5%D0%B3%D0%BC%D0%B5%D0%BD%D1%82%D0%B0%D1%86%D0%B8%D1%8F-%D0%BF%D0%BE-%D0%B3%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0%D0%BC-%D0%BE%D0%B1%D1%8A%D0%B5%D0%BA%D1%82%D0%B0-%D0%B8-%D0%BE%D0%B1%D0%BB%D0%B0%D1%81%D1%82%D1%8F%D0%BC-%D0%B8%D0%B7%D0%BE%D0%B1%D1%80%D0%B0%D0%B6%D0%B5%D0%BD%D0%B8%D1%8F-%D1%81-%D1%80%D0%B5%D0%B0%D0%BB%D0%B8%D0%B7%D0%B0%D1%86%D0%B8%D0%B5%D0%B9-%D0%B2-python-e29f392b84c3
Проверьте это
-
2023-01-13 13:27:28+00:00
Здравствуйте! Подскажите, пожалуйста, хорошие источники по семантической сегментации с практическими примерами на питоне)
В данный момент сделала выделение контуров на изображении, дальше должен быть какой-то другой этап семантической сегментации
-
2023-01-13 09:34:46+00:00
sql;матстат/тервер;python;предметная область
-
2023-01-13 07:58:50+00:00
Окей, спасибо
-
2023-01-13 05:15:31+00:00
Как почитаешь - посмотри ещё статью на тему , как p-value надо правильно применять: https://www.nature.com/articles/d41586-019-00857-9
-
2023-01-13 01:04:18+00:00
Доброй ночи, ребят, развиваюсь в направлении аналитики, интересна эта тема, может кто-то подскажет инфу , что нужно на работе аналитику, где лучше инфу брать для изучения и практики, заранее спасибо большое.
-
2023-01-14 21:51:02+00:00
запросите доступ https://drive.google.com/file/d/1PvgpZP61BUzswLXv-FXnA5dWn3qDur0X/view?usp=share_link, с 250 стр
-
2023-01-14 21:31:37+00:00
вроде как из самого объекта pipline уже никак (если кто-то знает, мне тоже интересно)
но можно использовать ColumnTransformer(...).transform(X_train) вне пайплайна и получить те же трансформированные признаки
-
2023-01-14 21:27:00+00:00
Добрый день! Учусь в GeekBraince на DataScience. Задал там вопрос всем преподавателям/менторам/наставникам. Как из pipeline python извлечь признаки после преобразований категориальных и числовых признаков? Никто не знает. Один товарищ наставник дал мне ссылку, но там и намека нет на ответ на мой вопрос. Есть только фраза extract features в заголовке статьи. Кто подстажет?
-
2023-01-14 14:59:38+00:00
Да
-
2023-01-14 14:55:13+00:00
Там же через вычеты считается, не ?
-
2023-01-14 14:53:56+00:00
Конечно. Это же комплексные числа
-
2023-01-14 14:51:23+00:00
А |z-1|=1 это точно замкнутый контур?
-
2023-01-14 13:13:43+00:00
Всем привет, может кто-нибудь шарит за интегралы по замкнутому контуру?)
-
2023-01-14 08:59:59+00:00
Подскажите как в Кагле включить оглавления так же как и в jupyterhub
-
2023-01-14 04:18:42+00:00
вопрос в том почему значения лернинга лежат в пределах (0, 1)?
https://ai.stackexchange.com/questions/23740/why-is-the-learning-rate-generally-beneath-1
-
2023-01-15 17:50:13+00:00
а ссылку через историю браузера не скажешь? потому что сейчас сложно найти нормальные задания для статистики
-
2023-01-15 17:49:06+00:00
я торрент удалил уже, брал где-то на рутрекере вродь
-
2023-01-15 17:48:52+00:00
скинешь?
-
2023-01-15 17:43:00+00:00
с торрентов
-
2023-01-15 17:42:48+00:00
А что за курсы?
-
2023-01-15 17:13:57+00:00
Народ может кто помочь,я на кофе скину пятихатку, прохожу курсы, не могу понять где косячу, на тестовых данных я получаю очень низкий результат, есть данные и результат 0 или 1, нужно предсказать. Результат получаю 0.6-0.7, иногда 0.8. ТЗ 0.9-0.95 Код в лс дам
-
2023-01-15 13:39:35+00:00
я щас просто посчитаю для реальных призов и закину в БД
-
2023-01-15 13:37:33+00:00
Будет одинаковый результат, если ты 1 раз нарандомишь, если сид не фиксированный
-
2023-01-15 13:27:16+00:00
вроде вот так не плохое распределения, index в листе это id участника
d = []
for i in range(0, 4):
d.append('1 банан')
for i in range(4, 7):
d.append('2 банан')
for i in range(7, 9):
d.append('5 банан')
d.append('10 банан')
for _ in range(100000):
for idx, i in enumerate(d):
r = random.randint(0,9)
d[idx] = d[r]
d[r] = i
-
2023-01-15 12:47:16+00:00
Пандасовская
-
2023-01-15 12:47:11+00:00
sample это существующая функция, если что)
-
2023-01-15 12:46:30+00:00
В numpy 100% есть функция перемешивания массива
-
2023-01-15 12:46:24+00:00
Сделай sample по датафрейму, чтобы просто перемешать наблюдения, потом через .iloc[ ] назначь выигрыши по тем местам, которые в голове, по типу: df.iloc[0] = 10; df.iloc[1:5] = 5 и тд
-
2023-01-15 12:34:05+00:00
пока думаю в сторону
сделать
по номер с
1-50 - 1 банан
50 - 60 - 2 банана
60-65 - 5 бананов
66 - 10 бананов
потом этот еррей встрясти раз 1000
-
2023-01-15 12:29:48+00:00
Как считаете
-
2023-01-15 12:29:45+00:00
Люди, будут ли актуальны джуны через полгода-год, с учётом кризиса и ии?
-
2023-01-15 12:29:29+00:00
точнее я хочу случайно назначить призы за номером
сделать типа 1 номер получает 1 банан, 50 номер - 10 бананов
-
2023-01-15 12:28:50+00:00
1/66,
5/66,
10/66,
50/66
Тут и пайтон не сильно нужен 🤷♂️
-
2023-01-15 12:27:30+00:00
хочу посчитать предварительно до старта промо кампании, чтобы это не делать в моменте
номер участника это номер заявки по сути датавермя max(id участника) + 1
-
2023-01-15 12:27:21+00:00
Посоветуйте, пожалуйста, учебники/книги по статистике, матану и теорверу... В голове какая-то небольшая база осталась, но надо все вспомнить
-
2023-01-15 12:26:20+00:00
Каким образом номер участника влияет на результат?
-
2023-01-15 12:24:01+00:00
Привет, скажите плиз как лучше посчитать вероятность , на питоне, по номеру участника, всего 66 участников,
сделать типа 1 номер получает 1 банан, 50 номер - 10 бананов
Условия:
50 участников получают 1 банан
10 - 2 банана
5 - 5 бананов
1 - 10 бананов
-
2023-01-15 12:00:53+00:00
Всем привет!👋
Куплю USDT за наличные💵
Предложения в лс💵
Личная встреча✅
-
2023-01-15 08:42:45+00:00
Другой, но можно подключиться к тому, который в анаконде
-
2023-01-15 08:37:16+00:00
и другой вопрос, если я пользуюсь штатным терминалом, то там уже другой питон?
-
2023-01-15 08:36:21+00:00
вопрос, если я установил анаконду, то работая например с юпитером, используется виртуальная среда с питоном от анаконды? Работаю на маке
-
2023-01-15 07:54:57+00:00
все все, спасибо!
-
2023-01-15 07:54:42+00:00
Это та же конда без лишних библиотек
-
2023-01-15 07:53:54+00:00
на м1 она доступна?
-
2023-01-15 07:53:38+00:00
Да. Лучше миниконду ставить
-
2023-01-15 07:53:15+00:00
это норм, что анаконда жрет 8 гб?
-
2023-01-15 05:17:19+00:00
Запросил
-
2023-01-16 22:10:46+00:00
Там нужно понять вводные. Для чего мы группируем компании, это дефолт, или желание у нас что-то купить и т.д. Далее нужно выбрать 10 самых важных показателей, для дефолта их даже меньше. Если Вы как-то не так оставшиеся 90 показателей раскрасите всем все равно. Выручка - любая это хорошо. Падение выручки это всегда плохо, даже если четверть компаний в выборке упала. Может ли а 1000 все быть нормальные. Это значит мы предполагаем что у распределения есть хвосты, но мало кто из тысячи в хвосты попал. Тут нужно по каждому показателю отдельно решать.
-
2023-01-17 21:14:29+00:00
В статьях , например, используют https://osf.io/ или https://gin.g-node.org/ или https://figshare.com/ или https://zenodo.org/
-
2023-01-18 21:41:26+00:00
хз
это видать глюк Excel'я
я сделал "импорт" из CSV и он нормально открыл этот же файл)))
-
2023-01-19 22:44:03+00:00
Спасибо большое
-
2023-01-20 22:52:11+00:00
Разные виды корреляций. Стд. На худой конец свертку одномерную
-
2023-01-22 00:33:16+00:00
Да, с async знаком, но тут по сути один процесс, но долгий
-
2023-01-22 20:04:24+00:00
Вероятно потому, что модуль best_params_ не установлен
-
2023-01-23 20:15:54+00:00
мб пригодится кому-нибудь..
-
2023-01-24 22:20:14+00:00
А откуда новая размерность
-
2023-01-26 21:42:44+00:00
Необязательно, у меня например шум из скважины
-
2023-01-27 14:09:28+00:00
rangeparam.l: rangeparam.r или rangeparam[0]:rangeparam[1]
-
2023-01-28 23:14:59+00:00
Прям дискриминация)
-
2023-01-29 20:33:04+00:00
Третий вектор)🔥 например внешние факторы...
-
2023-01-30 23:04:07+00:00
1. почти наверняка интервьюер посмотрит не более 1-2 ноутбуков, поэтому, возможно, стоит сократить их количество и оставить только релевантные для того сегмента, куда ты будешь апплаиться
2. имеет смысл отключить ворнинги (в 13м задании, например, они составляют большую часть ноутбука)
3. имеет смысл немного отрефакторить сами ноутбуки: убрать подробное описание данных, убрать текст задания и методические рекомендации. Вместо этого кратко описать, что этот ноутбук делает и оставить комментарии по коду.
-
2023-01-31 23:04:10+00:00
Подскажите платные тогда