Горячее
Лучшее
Свежее
Подписки
Сообщества
Блоги
Эксперты
#Круги добра
Войти
Забыли пароль?
или продолжите с
Создать аккаунт
Я хочу получать рассылки с лучшими постами за неделю
или
Восстановление пароля
Восстановление пароля
Получить код в Telegram
Войти с Яндекс ID Войти через VK ID
Создавая аккаунт, я соглашаюсь с правилами Пикабу и даю согласие на обработку персональных данных.
ПромокодыРаботаКурсыРекламаИгрыПополнение Steam
Пикабу Игры +1000 бесплатных онлайн игр Потеряшки: ищите потерянные предметы без времени! Расслабляйтесь, исследуйте, находите.

Потеряшки - поиск предметов

Головоломки, Казуальные, Детские

Играть

Топ прошлой недели

  • SpongeGod SpongeGod 1 пост
  • Uncleyogurt007 Uncleyogurt007 9 постов
  • ZaTaS ZaTaS 3 поста
Посмотреть весь топ

Лучшие посты недели

Рассылка Пикабу: отправляем самые рейтинговые материалы за 7 дней 🔥

Нажимая кнопку «Подписаться на рассылку», я соглашаюсь с Правилами Пикабу и даю согласие на обработку персональных данных.

Спасибо, что подписались!
Пожалуйста, проверьте почту 😊

Помощь Кодекс Пикабу Команда Пикабу Моб. приложение
Правила соцсети О рекомендациях О компании
Промокоды Биг Гик Промокоды Lamoda Промокоды МВидео Промокоды Яндекс Директ Промокоды Отелло Промокоды Aroma Butik Промокоды Яндекс Путешествия Постила Футбол сегодня
0 просмотренных постов скрыто
6
scutdusty
9 месяцев назад
Аналитика данных

Творожок Часть 2 Я календарь переверну⁠⁠

Те кто прочитали предыдущий пост - молодцы, те кто не прочитал - вкратце расскажу что здесь происходит. Я собрал инфу обо всех своих покупках в магазинчике за год и делаю аналитику того, как я и моя дочь хаваем творожки.

Итак…

Еще маленько причесав данные, рассчитав цену из стоимости и количества, отделив перед этим единицы измерения от мер делаем первую визуализацию в виде графичка. В каком количестве я покупаю творожки по дням.

Творожок Часть 2 Я календарь переверну Аналитика, Программирование, Мат, Данные, Анализ данных, Большие данные, Python, Bi, Длиннопост

8 августа я купил 13 творожков. Нихера себе, с запасиком. И не ходил после этого в магаз в магаз целых… хуй знает сколько дней. Надо щели сделать между столбиками,чтобы видеть дни, когда я не ходил в магазин. Для этого нужно разметить ось X всеми датами которые только возможны между первой и последней покупкой (а может и больше). И для этого в свою модель данных с покупками я щас въебу календарь.

Есть один секрет, как быстро сделать календарь для любой аналитической системы. Сейчас я вам его открою. Заходите в гугл и забиваете в строку поиска “Мастер календарь для /название вашей аналитической системы/”. После этого тыкаете во вторую, третью или максимум четвертую ссылку, пиздите оттуда код, вставляете его к себе, запускаете и Вуаля! Наш календарь готов! Осталось только соединить его с моделькой прислюнявив даты из календаря к датам покупочек.

Творожок Часть 2 Я календарь переверну Аналитика, Программирование, Мат, Данные, Анализ данных, Большие данные, Python, Bi, Длиннопост

Обратите внимание на названия полей в модельке. Так делают хорошие разрабы. Так делают хорошие аналитики. Так делаю я. Так не делают долбоебы, у которых потом поле “количество” хуй пойми откуда взялось - из продаж, наличия на складе или пиздюлей, которых он огребает за такой нейминг.

Особый писк - это автоматический программно-генерируемый файл календаря, который затем прислюнявливается ко всем аналитическим приложениям. В него при необходимости можно въебать курсы валют на каждый день, производственный календарь, график менструаций в бухгалтерии и прочее.

Творожок Часть 2 Я календарь переверну Аналитика, Программирование, Мат, Данные, Анализ данных, Большие данные, Python, Bi, Длиннопост

Выглядит конечно уебищно, но зато все видно.

Продолжение следует…

Показать полностью 2
[моё] Аналитика Программирование Мат Данные Анализ данных Большие данные Python Bi Длиннопост
0
8
scutdusty
9 месяцев назад
Аналитика данных

Творожок Часть 1 QA⁠⁠

Я год ждал пока кто-нибудь напишет в сообщество “Аналитика данных” пост про аналитику или про дата менеджмент. Хуй там валялся. Пара каких-то постов ни о чем. Придется самому писать.

Итак.

Речь пойдет о творожках… Почему о творожках, спросите вы. И я с удовольствием отвечу: потому что я и моя дочь едим их на завтрак и иногда в течении дня. Бывают ситуации когда открываешь холодильник, с вожделением протягиваешь руку к прохладной пластиковой баночке, а там хер. Нету ничего. Закончились творожки. Для того чтобы избежать подобной ситуации в будущем - ее нужно уметь прогнозировать.  А какой может быть прогноз без аналитики?

Творожки я покупаю в большом сетевом магазине, по традиции Пикабу назову его так:  начинается на "Пере" и заканчивается на "кресток". Особо пытливые умы думаю догадаются. Каждый раз когда я там пробиваю покупку на кассе, подсовываю скидочную карту, в надежде получить скидочки. В это время заботливый сервер сохраняет список моих покупок. Поэтому зайдя в личный кабинет магазинчика - я могу посмотреть когда, чего, сколько и за сколько деняк я все покупал.

Творожок Часть 1 QA Аналитика, Программирование, Мат, Данные, Анализ данных, Большие данные, Python, Bi, Длиннопост

Скопировав эти данные я получил сырой датасет.  Дата, че купил, сколько и за сколько.

Творожок Часть 1 QA Аналитика, Программирование, Мат, Данные, Анализ данных, Большие данные, Python, Bi, Длиннопост

Питончиком причесываем данные и приводим в съедобный вид:

Творожок Часть 1 QA Аналитика, Программирование, Мат, Данные, Анализ данных, Большие данные, Python, Bi, Длиннопост

И первое что делает аналитик с сырыми данными - изучает их. И поэтому первое что мы разберём - это QA (качество) данных.

Данные проверяются по принципу “КОролевской СОбаке ТОчно ПОхуй на СВОю УНикальность”.

КО - корректность. Проверяем, что в колонке количество у нас числа, а не слово “хуй” например.

СО - согласованность. Если в сырых данных написано “творожок Блядисимо”, нехуй его сокращать или переименовывать, потому что если они попадут в разные таблицы или базы данных вы потом хер поймете один и тот же это творожок или разные.

ТО - точность. Если творожок стоит 63.99 это значит за два творожка я отвалю 127.98, а не 128 рублей. Ясно вам, Округлятели херовы?

ПО - полнота. Забегая вперед скажу, что на творожки за этот год я потратил 26 тысяч рубасов. Сам охуел если честно. Больше всего творожков пришлось на октябрь. Я бы не смог посчитать этого если в данных нет даты или названия продукта.

СВО - своевременность. Данные собрал с 1 декабря прошлого года до 1 декабря нынешнего. На следующий год пересчитаю за полный год. Будет своевременно. И красиво. 

УН - уникальность. Данные не должны дублироваться и чтобы не охуеть от двойных и тройных сумм в дашборде - создаем ключи и ID везде, где это возможно. Легче потом отследить от какой жопы те или другие ноги.

В любом случае в больших организациях за качество данных отвечает владелец бизнес-функции (начальник продаж, начальник закупок, начальник логистики и прочие шишки), а в очень больших - Data Quality Engineer. Поэтому если закупщики при создании карточки товара въебут килограммы туда где должны быть граммы и “хз” туда где должны быть сантиметры - то вместо кучи интересной информации бизнес-пользователи получат кучу говна. И это должна быть проблема бизнес-функции, а не аналитика, который по мнению бизнес-пользователей должен всю эту херню вылавливать и причесывать.

Продолжение следует…

P.S. Где тег "Творожок"?

Показать полностью 3
[моё] Аналитика Программирование Мат Данные Анализ данных Большие данные Python Bi Длиннопост
1
36
imctobitch
imctobitch
Норм автор
Серия I'm CTO, bitch
9 месяцев назад

Настоящий аналитик⁠⁠

Настоящий аналитик I`m CTO bitch, IT юмор, Юмор, Разработка, Найм, Аналитика, База данных, Данные, Память, Аналитик, Анализ данных, Восстановление данных, Резервное копирование, Вакансии, Рехаб, Скриншот

🤬👉️ Телеграм-канал

[моё] I`m CTO bitch IT юмор Юмор Разработка Найм Аналитика База данных Данные Память Аналитик Анализ данных Восстановление данных Резервное копирование Вакансии Рехаб Скриншот
3
0
VkashuEb
VkashuEb
11 месяцев назад
Искусственный интеллект

Прогнозирование голов в футболе с помощью нейронных сетей⁠⁠

Идея: Обучить нейронную сеть предсказывать, будет ли забит гол до конца матча, на основе статистики игры (атаки, удары, карточки и т.д.).
Цель: Найти специалистов с опытом создания нейронных сетей для доведения проекта до готового продукта. У нас уже есть готовые датасеты и первые версии программы.
Особенность: Это мой первый серьезный проект в IT.
Если вам интересно принять участие, оставьте свой Telegram для связи.

[моё] Нейронные сети Python Анализ данных Текст
37
seminon600
seminon600
1 год назад
Еврейский мир
Серия Технологии, наука стартапы, изобретатели, хайтек

Porsche Racing Cars будет использовать израильский анализ данных о транспортных средствах⁠⁠

Израильская компания Ituran , предоставляющая ведущие в мире решения по анализу данных для транспортных средств, объединилась с Microsoft и Porsche, чтобы представить свои технологии на автогонках Porsche Carrera Cup.

Porsche Racing Cars будет использовать израильский анализ данных о транспортных средствах Израиль, Стартап, Технологии, Инновации, Porsche, Гонки, Porsche Carrera, Авто, Анализ данных, Microsoft

Гонка Carrera Cup — это серия мероприятий, посвященных спортивным автомобилям Porsche. Она известна тем, что включает в себя идентичные высокопроизводительные автомобили, что делает любой успех во многом зависящим от навыков и стратегии водителя, команды и инженеров.

Устройства Ituran будут установлены на всех автомобилях Porsche, участвующих в соревновании, а технология будет собираться и передаваться в режиме реального времени с помощью облачной технологии Microsoft Azure. Данные позволят различным командам Porsche принимать быстрые и обоснованные решения во время гонок, улучшая производительность водителя и автомобиля и увеличивая шансы на победу. Технология также помогает обеспечить безопасность, диагностируя любые потенциальные неисправности в режиме реального времени. 

«Мы невероятно гордимся тем, что являемся частью этой новаторской инициативы, сотрудничая с ведущим производителем автомобилей Porsche, а также с ведущей в мире компанией-разработчиком программного обеспечения Microsoft», — сказал генеральный директор Ituran Эяль Шерацки.

«Автоспорт представляет собой передовой опыт того, что возможно в 2024 году, и тот факт, что технология Ituran лежит в основе телеметрической системы гоночных автомобилей Porsche, демонстрирует наше технологическое лидерство», — сказал он.

«Этот проект отражает наше видение будущего, постоянное внедрение инноваций для подключенного автомобиля и внедрение новейших технологий в продукты и услуги Ituran. Мы уже ищем возможности использовать новые возможности, разработанные для этого проекта, во всем нашем бизнесе».

Перевод с английского

ИСТОЧНИК

Показать полностью
Израиль Стартап Технологии Инновации Porsche Гонки Porsche Carrera Авто Анализ данных Microsoft
0
4
Neurosonya
Neurosonya
1 год назад
Полезные нейросети
Серия Полезность

Платформа для учебы и анализа информации⁠⁠

Инструмент особенно полезен для исследователей, аналитиков и студентов, которым нужно работать с большими объемами информации.

Delve — это платформа для качественного анализа данных, которая помогает исследователям анализировать интервью, фокус-группы и другие качественные данные.

Представьте, что вам нужно быстро разобраться в новой теме или написать обзор литературы. Вместо того чтобы тратить недели на поиски и чтение статей, вы используете Delve, чтобы быстро собрать и проанализировать всю необходимую информацию.

Платформа помогает исследователям находить важные статьи, структурировать данные и быстро понимать, что нового в их области. Отвечая на запрос, Delve автоматически выделяет ключевые слова, нажав на которые вы получаете дополнительную информацию и так до бесконечности, пока вы не разберетесь в теме.

Что крутого:

- Использование ИИ для помощи в анализе данных:

Например, ИИ может предложить новые подкатегории или помочь в организации данных. Еще можно попросить кратко описать какой-нибудь концепт, связать его с интересующей темой или упростить ответ, если вы чего-то не поняли.

- автоматическое создание обзоров

- выявление ключевых идей

- создание красивых визуализаций данных

- интуитивно понятный интерфейс

- возможность совместной работы в реальном времени

Что ж, Delve — это мощный инструмент для тех, кто занимается качественными исследованиями и хочет оптимизировать процесс анализа данных. Мне даже регистрироваться не пришлось, оплату тоже не потребовал.

Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпиcывайтесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.

Показать полностью 1
[моё] Искусственный интеллект Чат-бот Нейронные сети Инновации Технологии Полезное Анализ данных Учеба Исследования Данные Видео Без звука Длиннопост
0
6
Neurosonya
Neurosonya
1 год назад
Полезные нейросети
Серия Полезность

Новые обновления ChatGPT 4o. Работа с таблицами и анализ данных⁠⁠

Теперь можно взаимодействовать с таблицами и диаграммами прямо в ChatGPT 4o, более того, файлы добавлять можно прямо из Google Диска и Microsoft OneDrive. Но самое главное - это улучшения в анализе данных!

Как видно из видео, сначала загружаются последние версии файлов прямо с Google Диска и Microsoft OneDrive. В отдельном интегрированном окне пишется запрос, на основе которого меняется таблица или диаграмма. Их можно настраивать в режиме реального времени.

Благодаря анализу данных, можно объединить и очистить большой набор данных, создать диаграммы и сделать углубленный анализ.

Итак, подробнее.

Возможность добавления файлов прямо из Google Диска и Microsoft OneDrive

Убрался главный головняк! Вместо того, чтобы загружать файлы на рабочий стол, а затем загружать их в ChatGPT, теперь можно будет добавлять файлы различных типов прямо со своего Google Диска или Microsoft OneDrive. Это позволяет ChatGPT быстрее понимать ваши Google таблицы, документы, слайды, а также файлы Microsoft Excel, Word и PowerPoint.

Возможность работать с таблицами в режиме реального времени

При добавлении набора данных, ChatGPT создаст интерактивную таблицу, которую можно будет развернуть в полноэкранном режиме, чтобы можно было следить за ее обновлением во время анализа. Если нажать на определенные области, можно задать дополнительные вопросы, или выбрать одну из предложенных ChatGPT подсказок, чтобы углубиться в анализ.

Например, вы можете попросить ChatGPT объединить таблицы ежемесячных расходов и создать сводную таблицу, разбитую по типам расходов.

Возможность настройки диаграмм

Теперь можно будет настраивать гистограммы, линейные, круговые и точечные диаграммы и взаимодействовать с ними в разговоре. При наведении указателя мыши на элементы диаграммы, можно задать дополнительные вопросы или выбрать цвета. Когда все будет готово, можно загрузить и использовать в презентациях или документах.

Например, вы можете выбрать Google Sheet с последними пользовательскими данными вашей компании прямо с Google Диска и попросить ChatGPT создать диаграмму, показывающую показатели удержания по когортам.

Вообще удобно! Просто загрузить свой файл, выделить столбец, и в отдельном диалоговом окне попросить например, сгруппировать данные по месяцу или округлить числа, а затем попросить визуализировать вовлеченность по каналам за этот месяц:

К сожалению, улучшенный анализ данных будет доступен в ChatGPT-4o для пользователей ChatGPT Plus, Team и Enterprise в ближайшие недели.

Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпиcывайтесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.

Показать полностью 4
[моё] Полезное Инновации Искусственный интеллект Технологии Чат-бот ChatGPT Gpt4 Нейронные сети Openai Улучшения Анализ данных Google Таблицы Обновление Видео Без звука Длиннопост
0
2
Neurosonya
Neurosonya
1 год назад
Серия Полезность

В ChatGPT 4o улучшили анализ данных. Вот зачем нужна платная подписка⁠⁠

В продолжение к прошлой статье о новой модели ChatGPT 4o

Open AI начинают внедрять улучшения в анализе данных:

Теперь можно добавлять файлы прямо с Google Диска и Microsoft OneDrive, модель сам будет взаимодействовать с таблицами и диаграммами на основе ваших подсказок.

Еще можно будет настраивать и загружать диаграммы для презентаций и документов.

А еще, ChatGPT 4o может решать ряд задач, связанных с данными, например объединение и очистка больших наборов данных, создание диаграмм и получение ценной информации. Это здорово облегчит новичкам выполнение углубленного анализа и сэкономит время экспертов на рутинных задачах по очистке данных.

А вот теперь самое главное:

Улучшения анализа данных будут доступны в новой флагманской модели GPT-4o для пользователей ChatGPT Plus, Team и Enterprise в ближайшие недели. Вот еще зачем нужна платная подписка. Не терпится потестить!

Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпиcывайтесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.

Показать полностью
[моё] Инновации Полезное Технологии Искусственный интеллект Чат-бот ChatGPT Gpt4 Свежее Новинки Анализ данных Нейронные сети Openai Таблица Диаграмма Видео Без звука
0
Посты не найдены
О нас
О Пикабу Контакты Реклама Сообщить об ошибке Сообщить о нарушении законодательства Отзывы и предложения Новости Пикабу Мобильное приложение RSS
Информация
Помощь Кодекс Пикабу Команда Пикабу Конфиденциальность Правила соцсети О рекомендациях О компании
Наши проекты
Блоги Работа Промокоды Игры Курсы
Партнёры
Промокоды Биг Гик Промокоды Lamoda Промокоды Мвидео Промокоды Яндекс Директ Промокоды Отелло Промокоды Aroma Butik Промокоды Яндекс Путешествия Постила Футбол сегодня
На информационном ресурсе Pikabu.ru применяются рекомендательные технологии