Benchmark не имеет смысла

Серия ITшное

В сети гуляет множество статей на тему кто быстрее слон или кит ?

Benchmark не имеет смысла

Даже иногда проводят презентации , вебинары .
Только дело в том , что эти тесты не имеют никакого практического смысла .
Во-первых информационная система будет разрабатываться не на той СУБД , у которой по цифрам лучше показатели на искусственных местах , а на той СУБД которую можно использовать в данной инфраструктуре.
Затем, к теме подключатся бухгалтеры и начнут считать лицензии .
На самой финальной части процесса принятия решения , спросят у руководителей группы разработки и сопровождения - а какие компетенции есть в наличии у специалистов?
И на всем протяжении процесса - цифры бенчмарков не появятся ни разу. Потому, что они в принципе ни на что не влияют.
А учитывая, что нет такой СУБД которую не сможет положить криворукий разраб - цифры сравнительных тестов теряют окончательный смысл и практическую пользу.

Мне довелось присутствовать на презентации отечественной СУБД, хотели войти в продуктовую линейку компании. Главная и первая ошибка - стали показывать графики неких тестов скорости . Как дошло время до вопросов - а , что у вас с администрированием , мониторингом и отчетами ? В ответ - в работе , ждем финансирование . Ну , вот когда найдёте и сделаете - тогда и приходите. А эти цифры и графики никому особо и не интересны .

Мнения

57 постов36 подписчиков

Правила сообщества

1. Соблюдайте правила Пикабу.

2. Посты должны быть авторскими и содержать тег [моё]

Вы смотрите срез комментариев. Показать все
Автор поста оценил этот комментарий

Ерунда. Вполне имеют.

Во-первых информационная система будет разрабатываться не на той СУБД , которая по цифрам лучше показатели на искусственных местах , а , для на начала на той СУБД которую можно использовать в данной инфраструктуре.

И разумеется, кто-то мешает проводить тесты именно на той СУБД, которая будет реально использоваться.

Затем, к теме подключатся бухгалтеры и начнут считать лицензии .

Да не вопрос. Резьба по костам - неизбежная часть любого внедрения.

На самой финальной части процесса принятия решения , спросят у руководителей группы разработки и сопровождения - а какие компетенции есть в наличии у специалистов .

Вы как-то неправильно себе представляете процесс проектирования решения.

И на всем протяжении процесса - цифры бенчмарков не появятся ни разу. Потому, что они в принципе ни на что не влияют.

Архитектор проекта должен на них основываться - и на теоретической пиковой производительности, и на потерях в ей на конкретных компонентах решения (плюс-минус лапоть, разумеется).

А учитывая, что нет такой СУБД которую не сможет положить криворукий разраб - цифры сравнительных тестов теряют окончательный смысл и практическую пользу.

А на деле, когда решение со старта работает не так, как планировалось - начинают искать виноватых. И начинают - с того, кто проектировал.

Так что довольно быстро выясняется - на чьей стороне косяк, если, конечно, те самые цифры есть.

А иначе просто слово одного человека против слова другого.

раскрыть ветку (37)
1
DELETED
Автор поста оценил этот комментарий

Да, ладно. Кто дешевле на тендере прогнулся, того система и будет, а как она работает всем пофиг, кроме поддержки)

раскрыть ветку (36)
0
Автор поста оценил этот комментарий

Это из серии "фсехкупили фсеполимерыпросраны" ? Бгг

Тогда уже можно сказать - кто раньше и выше зашёл в заказчика - того система и будет, ничем не хуже конспирология.

Много раз видел примеры обратного.

раскрыть ветку (35)
1
DELETED
Автор поста оценил этот комментарий

Может быть, но не в госструктурах и близких к ним(всякие Газпромы и прочее), тут решает только цена и минимальный функционал. И никакими бенчмарками тут ничего не докажешь.

раскрыть ветку (34)
Автор поста оценил этот комментарий

Тоже нет.

Решает - правильное обоснование цены заказчику, причём так, чтобы заказчик понял на уровне руководства, почему это столько стоит и что то, за что он не заплатит - он не получит в любом случае.

Это, разумеется, при разумных хотелках подрядчика по части маржинальности.


Бенчмарки сами по себе не решают, но будут хорошей подкладкой в документации, потому, что заказчик будет ориентироваться не на рекламу, а на мнение ИТ-специалистов, которым он доверяет.

раскрыть ветку (33)
1
DELETED
Автор поста оценил этот комментарий

Нет, в таких конторах это так не решается, тут нет свободного рынка и если умасливать, оотначальников нескольких управлений, а это встанет в такое бабло, что и не сосчитать.

Зачем вы спорите, ведь явно не работали в таких компаниях, но пытаетесь доказать что есть рука рынка и прочее. Ее тут нет)

Закупают не то, что нужно специалистам, а то, что дешевле. И кроилово приводит к попадалову, но всем пофиг. И это касается не только закупок ИТ.

раскрыть ветку (20)
1
Автор поста оценил этот комментарий
"И это касается не только закупок ИТ." - в разработке тоже самое.
мое любимое:
-вы зачем эксклюзивную блокировку используете ?
- это не мы это Фреймворк.
Разработкой занимаются, те кто есть и так как могут.
Других нет .
"СУБД это хранилище данных" это реальная фраза реального разработчика , по поводу проблем с производительностью информационной системы.
раскрыть ветку (1)
0
Автор поста оценил этот комментарий

Разработкой занимаются, те кто есть и так как могут.
Других нет .

Надеюсь, я Вас не разочарую, если скажу, что это вообще везде так - и идеальных заказчиков и исполнителей в природе не существует ?

0
Автор поста оценил этот комментарий

Зачем вы спорите, ведь явно не работали в таких компаниях, но пытаетесь доказать что есть рука рынка и прочее. Ее тут нет)

Я работаю в "такой компании" 15 лет с перерывами, и очень люблю прохладные истории про "ничегоневыйдет всеполимерыпросралидонас".

Руки рынка нет, но есть интересы разных групп в заказчике (собственники, гендир, ИТ-отдел), которые имеют одну общую черту - никто не хочет терять деньги и получать клизьму с патефонными иголками.

раскрыть ветку (17)
1
DELETED
Автор поста оценил этот комментарий

И я работаю и работал в таких компаниях и всем похер на мнение и гемор работников.

Есть минимальный нужный функционал, стоит дешевле других? Берем. А все остальное опять же по формальным признакам.

Не так давно ещё один серьёзный признак появился - наш продукт, импортозамещение. И если он есть в списках, то всем пофигу, что конкуренты более производительны и меньше глючат, берём нашу поделку и всё тут.

Мне интересно, вы в РЖД работали? Вот там вся извращенная логика при закупках работает на 300%. Это прямо таки идеал)

раскрыть ветку (16)
0
Автор поста оценил этот комментарий

И я работаю и работал в таких компаниях и всем похер на мнение и гемор работников.

Ну то есть процессы принятия решений в руководстве крупных компаний для Вас тёмный лес.

Понятно.

Есть минимальный нужный функционал, стоит дешевле других? Берем. А все остальное опять же по формальным признакам.

Неа. А учитывая предыдущую цитату - не вижу смысла растекаться мысью по древу.

Не так давно ещё один серьёзный признак появился - наш продукт, импортозамещение. И если он есть в списках, то всем пофигу, что конкуренты более производительны и меньше глючат, берём нашу поделку и всё тут.

Если бы Вы интересовались темой - знали бы, что это основано не на хотелках, а на вполне конкретных ФЗ и постановлениях Правительства РФ, регулирующих тему закупок.

Мне интересно, вы в РЖД работали? Вот там вся извращенная логика при закупках работает на 300%. Это прямо таки идеал)

Именно в самой РЖД нет, в её больших дочках, типа ФПК - да.

Там логика та же самая - конкурирующие группы в заказчике, конкурирующие решения, тщательное обоснование выбора (а то будет атата всем, принимавшим участие).

Кто сумел донести до руководства компании свою точку зрения и понятным для руководства же образом обосновать её - тот и выигрывает.

Ну, если не облажается в процессе где-нибудь ещё до тендера.

раскрыть ветку (15)
1
DELETED
Автор поста оценил этот комментарий

"Ну то есть процессы принятия решений в руководстве крупных компаний для Вас тёмный лес.

Понятно."

Где вы прочитали о темном лесе? У нас решения обоснованы и есть документы по их принятию. Так вот основные критерии - цена и минимальный функционал. Хотелки и удобство итшников идут лесом, а уж бенчмарки разные так ещё дальше)

И это не только в ит. Техника также закупается и прочее, а потом скрещивают ежей и ужей от разных производителей. Так это и работает, а не влажные мечты о производительности, кто первый зашел и прочее. Смешно читать ваши рассуждения на тему, когда видишь реальность.

раскрыть ветку (14)
0
Автор поста оценил этот комментарий

Так вот основные критерии - цена и минимальный функционал.

Эти критерии возникают сильно позже реального принятия решения.

Особенно в части минимального функционала - что должно в это понятие входить.

Борьба с ростом хотелок по ходу внедрения - это отдельная история.

Хотелки и удобство итшников идут лесом, а уж бенчмарки разные так ещё дальше)

Значит, ИТ-шники не могут их понятным для руководства образом обосновать.

Это проблема не руководства, если что.

Смешно читать ваши рассуждения на тему, когда видишь реальность

Я уже не смеюсь над людьми, считающих видимый ими крохотный кусок реальности - всем миром или даже всей вселенной.

раскрыть ветку (13)
0
Автор поста оценил этот комментарий
"заказчик будет ориентироваться не на рекламу, а на мнение ИТ-специалистов, которым он доверяет." 😂🤣😅
доверять итшникам ? 😄😉😆
молодой человек - вам сколько лет и кто вы по жизни ?
раскрыть ветку (11)
0
Автор поста оценил этот комментарий

Мне 50+ лет, и я тем, о чём пишется здесь, занимаюсь довольно давно.

А Вам ? И кто Вы по жизни ?

раскрыть ветку (10)
0
Автор поста оценил этот комментарий
55 лет. В IT с 1987 .
DBA с 2001 . PostgreSQL с 2014. С 2019 в крупной государство-образующей компании.
Детали текущей работы https://dzen.ru/kznalp
Впрочем , вполне допускаю, что везде по разному , статистическими исследованиями я не занимался.
Потому и стоит тэг ИМХО.
Про себя могу сказать 100% - для меня цифры всех бенчмарков - пустой звук.
Хотя бы потому, что как правило используют среднее арифметическое и вообще в продуктивной инфраструктуре в облачной среде все эти цифры теряют последний смысл.
А статистической обработкой данных , практически никто не занимается .
раскрыть ветку (9)
0
Автор поста оценил этот комментарий

Про себя могу сказать 100% - для меня цифры всех бенчмарков - пустой звук.

Значит, Вам надо обосновывать своё мнение как-то иначе - на примерах внедрений с цифирью. Это трудно - заказчики крайне не любят показывать кому бы то ни было свою внутреннюю кухню, но возможно.

При условии, разумеется, что руководство Вашей компании ориентируется на Ваше мнение по конкретному вопросу, где закупка/тендер.

Если нет - извините, Вам доказывать что-то вряд ли будут, отделаются формальными документами, лишнюю работу делать не любит никто.

Доказывать будут тем ИТ-специалистам, на чьё мнение руководство компании будет ориентироваться в этом случае.

раскрыть ветку (8)
0
Автор поста оценил этот комментарий
"Значит, Вам надо обосновывать своё мнение как-то иначе - на примерах внедрений с цифирью." мне не надо ничего никому обосновывать.
Я инженер , эксперт направления. Я не общаюсь с манагерами и заказчиками.
Если есть необходимость в экспертизе - оформляйте запрос, информация будет предоставлена. Как будет использована и какие решения будут приняты - не моё дело .
Я накушался этими играми во времена работы руководителем , больше в этот гадюшник не вернусь.
раскрыть ветку (7)
0
Автор поста оценил этот комментарий

Если есть необходимость в экспертизе - оформляйте запрос, информация будет предоставлена.

Вот именно. Но при этом чаще всего пропускается вторая часть: если фэйл будет именно в части экспертизы, отнесённой к Вашей компетенции - всё дерьмо потечёт именно на Вас.

Я инженер , эксперт направления. Я не общаюсь с манагерами и заказчиками.

Схожая фигня, но я часто общаюсь и с теми, и с другими (а ещё и с субподрядчиками - исполнителями по отдельным частям проекта), и как раз разъясняю преимущества нашего решения и недостатки других, именно в технической части.

Это помимо, собственно, проектирования решений.

Отсюда и некоторое понимание процессов.

раскрыть ветку (6)
Вы смотрите срез комментариев. Чтобы написать комментарий, перейдите к общему списку

Темы

Политика

Теги

Популярные авторы

Сообщества

18+

Теги

Популярные авторы

Сообщества

Игры

Теги

Популярные авторы

Сообщества

Юмор

Теги

Популярные авторы

Сообщества

Отношения

Теги

Популярные авторы

Сообщества

Здоровье

Теги

Популярные авторы

Сообщества

Путешествия

Теги

Популярные авторы

Сообщества

Спорт

Теги

Популярные авторы

Сообщества

Хобби

Теги

Популярные авторы

Сообщества

Сервис

Теги

Популярные авторы

Сообщества

Природа

Теги

Популярные авторы

Сообщества

Бизнес

Теги

Популярные авторы

Сообщества

Транспорт

Теги

Популярные авторы

Сообщества

Общение

Теги

Популярные авторы

Сообщества

Юриспруденция

Теги

Популярные авторы

Сообщества

Наука

Теги

Популярные авторы

Сообщества

IT

Теги

Популярные авторы

Сообщества

Животные

Теги

Популярные авторы

Сообщества

Кино и сериалы

Теги

Популярные авторы

Сообщества

Экономика

Теги

Популярные авторы

Сообщества

Кулинария

Теги

Популярные авторы

Сообщества

История

Теги

Популярные авторы

Сообщества