8 августа я купил 13 творожков. Нихера себе, с запасиком. И не ходил после этого в магаз в магаз целых… хуй знает сколько дней. Надо щели сделать между столбиками,чтобы видеть дни, когда я не ходил в магазин. Для этого нужно разметить ось X всеми датами которые только возможны между первой и последней покупкой (а может и больше). И для этого в свою модель данных с покупками я щас въебу календарь.

Есть один секрет, как быстро сделать календарь для любой аналитической системы. Сейчас я вам его открою. Заходите в гугл и забиваете в строку поиска “Мастер календарь для /название вашей аналитической системы/”. После этого тыкаете во вторую, третью или максимум четвертую ссылку, пиздите оттуда код, вставляете его к себе, запускаете и Вуаля! Наш календарь готов! Осталось только соединить его с моделькой прислюнявив даты из календаря к датам покупочек.

Обратите внимание на названия полей в модельке. Так делают хорошие разрабы. Так делают хорошие аналитики. Так делаю я. Так не делают долбоебы, у которых потом поле “количество” хуй пойми откуда взялось - из продаж, наличия на складе или пиздюлей, которых он огребает за такой нейминг.

Особый писк - это автоматический программно-генерируемый файл календаря, который затем прислюнявливается ко всем аналитическим приложениям. В него при необходимости можно въебать курсы валют на каждый день, производственный календарь, график менструаций в бухгалтерии и прочее.

Выглядит конечно уебищно, но зато все видно.

Продолжение следует…

Скопировав эти данные я получил сырой датасет.  Дата, че купил, сколько и за сколько.

Питончиком причесываем данные и приводим в съедобный вид:

И первое что делает аналитик с сырыми данными - изучает их. И поэтому первое что мы разберём - это QA (качество) данных.

Данные проверяются по принципу “КОролевской СОбаке ТОчно ПОхуй на СВОю УНикальность”.

КО - корректность. Проверяем, что в колонке количество у нас числа, а не слово “хуй” например.

СО - согласованность. Если в сырых данных написано “творожок Блядисимо”, нехуй его сокращать или переименовывать, потому что если они попадут в разные таблицы или базы данных вы потом хер поймете один и тот же это творожок или разные.

ТО - точность. Если творожок стоит 63.99 это значит за два творожка я отвалю 127.98, а не 128 рублей. Ясно вам, Округлятели херовы?

ПО - полнота. Забегая вперед скажу, что на творожки за этот год я потратил 26 тысяч рубасов. Сам охуел если честно. Больше всего творожков пришлось на октябрь. Я бы не смог посчитать этого если в данных нет даты или названия продукта.

СВО - своевременность. Данные собрал с 1 декабря прошлого года до 1 декабря нынешнего. На следующий год пересчитаю за полный год. Будет своевременно. И красиво. 

УН - уникальность. Данные не должны дублироваться и чтобы не охуеть от двойных и тройных сумм в дашборде - создаем ключи и ID везде, где это возможно. Легче потом отследить от какой жопы те или другие ноги.

В любом случае в больших организациях за качество данных отвечает владелец бизнес-функции (начальник продаж, начальник закупок, начальник логистики и прочие шишки), а в очень больших - Data Quality Engineer. Поэтому если закупщики при создании карточки товара въебут килограммы туда где должны быть граммы и “хз” туда где должны быть сантиметры - то вместо кучи интересной информации бизнес-пользователи получат кучу говна. И это должна быть проблема бизнес-функции, а не аналитика, который по мнению бизнес-пользователей должен всю эту херню вылавливать и причесывать.

Продолжение следует…

P.S. Где тег "Творожок"?

Гонка Carrera Cup — это серия мероприятий, посвященных спортивным автомобилям Porsche. Она известна тем, что включает в себя идентичные высокопроизводительные автомобили, что делает любой успех во многом зависящим от навыков и стратегии водителя, команды и инженеров.

Устройства Ituran будут установлены на всех автомобилях Porsche, участвующих в соревновании, а технология будет собираться и передаваться в режиме реального времени с помощью облачной технологии Microsoft Azure. Данные позволят различным командам Porsche принимать быстрые и обоснованные решения во время гонок, улучшая производительность водителя и автомобиля и увеличивая шансы на победу. Технология также помогает обеспечить безопасность, диагностируя любые потенциальные неисправности в режиме реального времени. 

«Мы невероятно гордимся тем, что являемся частью этой новаторской инициативы, сотрудничая с ведущим производителем автомобилей Porsche, а также с ведущей в мире компанией-разработчиком программного обеспечения Microsoft», — сказал генеральный директор Ituran Эяль Шерацки.

«Автоспорт представляет собой передовой опыт того, что возможно в 2024 году, и тот факт, что технология Ituran лежит в основе телеметрической системы гоночных автомобилей Porsche, демонстрирует наше технологическое лидерство», — сказал он.

«Этот проект отражает наше видение будущего, постоянное внедрение инноваций для подключенного автомобиля и внедрение новейших технологий в продукты и услуги Ituran. Мы уже ищем возможности использовать новые возможности, разработанные для этого проекта, во всем нашем бизнесе».

Перевод с английского

ИСТОЧНИК

Инструмент особенно полезен для исследователей, аналитиков и студентов, которым нужно работать с большими объемами информации.

Delve — это платформа для качественного анализа данных, которая помогает исследователям анализировать интервью, фокус-группы и другие качественные данные.

Представьте, что вам нужно быстро разобраться в новой теме или написать обзор литературы. Вместо того чтобы тратить недели на поиски и чтение статей, вы используете Delve, чтобы быстро собрать и проанализировать всю необходимую информацию.

Платформа помогает исследователям находить важные статьи, структурировать данные и быстро понимать, что нового в их области. Отвечая на запрос, Delve автоматически выделяет ключевые слова, нажав на которые вы получаете дополнительную информацию и так до бесконечности, пока вы не разберетесь в теме.

Что крутого:

- Использование ИИ для помощи в анализе данных:

Например, ИИ может предложить новые подкатегории или помочь в организации данных. Еще можно попросить кратко описать какой-нибудь концепт, связать его с интересующей темой или упростить ответ, если вы чего-то не поняли.

- автоматическое создание обзоров

- выявление ключевых идей

- создание красивых визуализаций данных

- интуитивно понятный интерфейс

- возможность совместной работы в реальном времени

Что ж, Delve — это мощный инструмент для тех, кто занимается качественными исследованиями и хочет оптимизировать процесс анализа данных. Мне даже регистрироваться не пришлось, оплату тоже не потребовал.

Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпиcывайтесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.

Как видно из видео, сначала загружаются последние версии файлов прямо с Google Диска и Microsoft OneDrive. В отдельном интегрированном окне пишется запрос, на основе которого меняется таблица или диаграмма. Их можно настраивать в режиме реального времени.

Благодаря анализу данных, можно объединить и очистить большой набор данных, создать диаграммы и сделать углубленный анализ.

Итак, подробнее.

Возможность добавления файлов прямо из Google Диска и Microsoft OneDrive

Убрался главный головняк! Вместо того, чтобы загружать файлы на рабочий стол, а затем загружать их в ChatGPT, теперь можно будет добавлять файлы различных типов прямо со своего Google Диска или Microsoft OneDrive. Это позволяет ChatGPT быстрее понимать ваши Google таблицы, документы, слайды, а также файлы Microsoft Excel, Word и PowerPoint.

Возможность работать с таблицами в режиме реального времени

При добавлении набора данных, ChatGPT создаст интерактивную таблицу, которую можно будет развернуть в полноэкранном режиме, чтобы можно было следить за ее обновлением во время анализа. Если нажать на определенные области, можно задать дополнительные вопросы, или выбрать одну из предложенных ChatGPT подсказок, чтобы углубиться в анализ.

Например, вы можете попросить ChatGPT объединить таблицы ежемесячных расходов и создать сводную таблицу, разбитую по типам расходов.

Возможность настройки диаграмм

Теперь можно будет настраивать гистограммы, линейные, круговые и точечные диаграммы и взаимодействовать с ними в разговоре. При наведении указателя мыши на элементы диаграммы, можно задать дополнительные вопросы или выбрать цвета. Когда все будет готово, можно загрузить и использовать в презентациях или документах.

Например, вы можете выбрать Google Sheet с последними пользовательскими данными вашей компании прямо с Google Диска и попросить ChatGPT создать диаграмму, показывающую показатели удержания по когортам.

Вообще удобно! Просто загрузить свой файл, выделить столбец, и в отдельном диалоговом окне попросить например, сгруппировать данные по месяцу или округлить числа, а затем попросить визуализировать вовлеченность по каналам за этот месяц:

К сожалению, улучшенный анализ данных будет доступен в ChatGPT-4o для пользователей ChatGPT Plus, Team и Enterprise в ближайшие недели.

Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпиcывайтесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.