Как стать автором
Обновить
163.57

Анализ и проектирование систем *

Анализируй и проектируй

Сначала показывать
Порог рейтинга
Уровень сложности

Требования к данным для систем ИИ по верификации людей

Уровень сложности Средний
Время на прочтение 4 мин
Количество просмотров 343

Чтобы обеспечить надежную и точную верификацию людей при использовании систем ИИ, необходимо разработать и определить оптимальные требования к наборам данных. Целью данного исследования является определение стандартов формирования наборов данных для повышения качества работы систем верификации людей по изображению.

Читать далее
Всего голосов 2: ↑1 и ↓1 0
Комментарии 0

Новости

Про интеграции. Часть 1. Интеграционные подходы

Уровень сложности Простой
Время на прочтение 9 мин
Количество просмотров 3.6K

Динамика развития межсистемных интеграций в крупных компаниях в чём-то повторяет известный закона Мура, примерно каждые 1.5-2 года в них происходит, по меньшей мере, двукратное увеличение межсистемных интеграций. По большей части это эмпирическое наблюдение, но внутренние статистики пары крупных компаний его подтверждают. Причины этого разнообразны, где-то произошла декомпозиция уже работающих ИТ-систем, где-то изменились бизнес-процессы и выяснилось, что их можно более полно автоматизировать, таким образом родились новые ИТ-решения. Список причин возникновения новых интеграций большой и для любой крупной компании, вопрос контроля интеграций, централизованных инструментов, паттернов и подходов по их реализации становится всё более актуальным.

Читать далее
Всего голосов 3: ↑3 и ↓0 +3
Комментарии 3

Как мы не выбрали Airbyte, или почему собирать данные лучше по старинке

Уровень сложности Средний
Время на прочтение 7 мин
Количество просмотров 2.3K

Привет, Хабр! Меня зовут Илья, я работаю инженером данных в компании Selectel. В отделе BI мы собираем информацию из внутренних и внешних источников и предоставляем аналитикам.

У нас достаточно большой набор внешних ресурсов, данные из которых нужно собирать и обрабатывать. Среди них — различные SMM-площадки вроде VK и Telegram, платформы лидогенерации, инструменты таргетированной рассылки писем, системы автоматизации и многое-многое другое.

Так как компания развивается, мы спрогнозировали, что число источников тоже будет только расти. И назрела мысль, что нам нужно подобрать специализированное ПО, которое будет отвечать за доставку данных из внешних ресурсов в DWH. Время прошло, идея воплощена: мы используем Airflow и самописные коннекторы на Python. Но могло сложиться все иначе — и мы бы использовали Airbyte, если бы не одно но…
Читать дальше →
Всего голосов 32: ↑31 и ↓1 +30
Комментарии 4

Применение DDD. От моделей до EDM — поиск новых форм и архитектурные излишества

Время на прочтение 14 мин
Количество просмотров 4.1K

Под катом рассказ о самой авангардной форме архитектуры которую мне с коллегами удалось получить, как ещё больше можно развить этот подход.



DDD не на коленке, а за дорого ;)

Читать дальше →
Всего голосов 10: ↑10 и ↓0 +10
Комментарии 6

Истории

Банки.ру: от монолита до микрофронтендов

Уровень сложности Простой
Время на прочтение 10 мин
Количество просмотров 1.6K

Всем привет! Меня зовут Марсель Абдрахманов, я фронтлид в Банки.ру. В статье хочу поделиться нашей историей ухода от монолита к микрофронтендам. У нас в Банки.ру большой отдел веб-разработки, за последнее время мы сильно выросли, ежедневно катим десятки релизов на прод. Расскажу, как мы относительно быстро внедрили микрофронтенды и перешли на архитектуру, которая позволила сократить время доставки обновлений на прод с двух дней до нескольких часов.

Если интересно, прошу под кат.
Всего голосов 10: ↑10 и ↓0 +10
Комментарии 3

Системный аналитик: каждой бочке затычка

Уровень сложности Средний
Время на прочтение 6 мин
Количество просмотров 7.4K

В последнее время наблюдаю тенденцию увеличения обязанностей системного аналитика, и, кажется, в явном виде об этом никто не говорит. Наоборот, смотря профессиональные чаты и общаясь с коллегами, я в большинстве случаев считываю превалирующую мысль, что системный аналитик — это специалист, который должен и может всё: и бизнес-цели по SMART поставить, и базу данных разработать. Мне как системному аналитику видится в такой тенденции будущая проблема моей профессии: знания и достижения, которые я приобретаю сейчас, будут обнуляться на каждом новом проекте, потому что там от меня будут ожидать что-то совсем другое. В этой статье пробую разобраться почему системный анализ как подход к решению задач превратился в должность “человек-оркестр”?

Читать далее
Всего голосов 20: ↑19 и ↓1 +18
Комментарии 28

Как сэкономить четверть бюджета проекта внедрения с помощью чек-листа качества бизнес-требований

Время на прочтение 7 мин
Количество просмотров 3K

Привет, Хабр! Я Владимир Хрыпун, руководитель центра компетенций по развитию BPM-систем. Если кратко, то когда у вас в компании есть бизнес-процесс  регулярно повторяющиеся действия приводящие к нужным и прогнозируемым результатам, и вы хотите (или собственник бизнеса), чтобы эти результаты были лучше, потерь меньше и вообще все были счастливы и купили по ламбаргини, то вам нужна такая команда как наша. Мы помогаем частично или полностью автоматизировать бизнес-процессы компании. 

Эта статья о чек-листе анализа полноты бизнес-требований для проектов цифровой трансформации.

Чем больше людей работает в процессе, тем больше будет эффект от внедрения bpm-системы. Представим, что операционный бизнес – это грузоперевозки,  в бизнесе около 100 000 вагонов. У вас тысячи клиентов и сотни сотрудников. И допустим, что один из процессов – это согласование с клиентом маршрута, по которому пойдет груз. Результат: маршрут согласован, вагоны готовим под погрузку. В процессе участвует несколько отделов, выполняющих различные роли, и ежедневно сотрудники компании делают сотни действий, чтобы добиться результата – такие процессы называют сквозными, они большие, сложные, но жизненно важные для бизнеса. Экономические эффекты в таком проекте можно достичь упростив процесс, сложные или редко используемые шаги сделать понятными для сотрудников. Самый яркий пример – это “Вкусно и точка” *). Они не делают самые вкусные бургеры, зато они делают их быстро и с гарантированным уровнем качества. Сложные процессы упрощены и там, где это возможно, автоматизированы. Поэтому за 5 минут мы можем купить дешевый бургер, а компания на этом зарабатывает миллионы – все счастливы (особенно акционеры))). 

Читать далее
Всего голосов 7: ↑4 и ↓3 +1
Комментарии 3

Задачник для проработки бизнес-мышления начинающим аналитиком данных

Уровень сложности Простой
Время на прочтение 8 мин
Количество просмотров 5.8K

Бизнес-мышление нужно аналитикам данных, чтобы понимать потребности бизнес-пользователей и эффективно доносить до них результаты анализа данных; понимать задачи бизнеса и определять, как анализ данных может помочь их достичь; прогнозировать последствия своих решений.

Складывается впечатление, что бизнес-мышление нельзя наработать в отрыве от бизнеса… или всё-таки можно? 

Меня зовут Елена Эльзессер, я почти 20 лет работаю с данными. Из них семь набирала и растила джунов, три — наставник в Практикуме на курсе «Аналитик данных». За это время у меня выработалось несколько мыслеупражнений, которые помогают прокачивать бизнес-мышление. Понимая всю сложность обучения и возможную интровертность, торжественно обещаю не говорить о хакатонах, пет-проектах, общении и любых других дополнительных ресурсах. Только вы и ваш проект, даже гугл по желанию. Заинтриговала?

Читать далее
Всего голосов 5: ↑4 и ↓1 +3
Комментарии 0

Универсальные факты: конструктор извлечения для аналитика

Уровень сложности Средний
Время на прочтение 7 мин
Количество просмотров 852

Привет, мы команда LegalDocs Управления «Проектный офис» в Правовом департаменте. У Сбербанка огромное количество клиентов, от обычных людей до больших корпораций. Все вместе они предоставляют множество видов документов, из которых нам нужно быстро извлекать юридически значимую информацию для последующей правовой экспертизы. Например, к нам обращается представитель большой компании за кредитом. И нам нужно оценить правоспособность: проверить, есть ли у этого представителя соответствующие полномочия в той организации, которую он представляет.

Если бы эту экспертизу проводил человек, то на его стол (физический или виртуальный) должен попасть большой пакет документов: устав организации, протокол о создании общества, протокол о нотариальные доверенности и многое другое. И чтобы искусственный интеллект (система автоматического принятия правового решения, или, как мы её называем, «робот-юрист», эта технология даже запатентована) мог принять решение, нужно сначала из каждого документа извлечь определённую информацию (значимые факты), структурировать её и отправить на проверку. Только после этого робот-юрист решит, есть ли правовые риски в этой кредитной сделке.

Читать далее
Всего голосов 8: ↑6 и ↓2 +4
Комментарии 3

Как мы делали «российский Зум»

Время на прочтение 9 мин
Количество просмотров 2.8K
image

С корпоративным софтом есть проблемы, а госкомпаниям в России в текущих реалиях надо как-то разговаривать.

В MS 365 был Teams, поэтому многие приходили к нам и спрашивали, есть ли в нашем офисном пакете такой же. Стало понятно, что нужна разработка такого решения.

При разработке «Р7-Команды» возникало множество сложностей, среди прочих отмечу две, которые отняли у нас немало времени и нервов. Во-первых, оказалось очень трудно обеспечить гарантированную доставку сообщений. Во-вторых, было непросто сделать видеоконференции с очень большим количеством пользователей. Но всё-таки мы уже полтора года на рынке.

Сейчас «Р7-Команду» используют ряд предприятий с тысячами сотрудников и государственные учреждения.

Продукт у нас выделен в отдельное направление, у него своя команда, в которую мы активно привлекаем новые кадры.
Читать дальше →
Всего голосов 16: ↑9 и ↓7 +2
Комментарии 13

Лояльные регуляторы и «всесильное» импортозамещение: ИБ-тенденции и проблемы глазами системного интегратора

Уровень сложности Простой
Время на прочтение 9 мин
Количество просмотров 2.1K

Информационная безопасность требует открытости — так что мы следуем заветам Керкгоффса и продолжаем приглашать представителей компаний, которые прежде не давали интервью, чтобы обсудить их взгляд на киберугрозы и тенденции в российском кибербезе.

Сегодня в Блог Бастион заглянул Кирилл Уголев, руководитель дивизиона информационной безопасности TEGRUS — одного из лидеров российского рынка системной интеграции. Он рассказал, с какими проблемами в части защиты информации сталкивается интегратор, какие ошибки допускает бизнес, насколько жестко действуют надзорные органы, стоит ли отказываться от зарубежных технологий в свете импортозамещения.

Читать далее
Всего голосов 16: ↑16 и ↓0 +16
Комментарии 4

Потребитель VS поставщик информации: принципы построения интеграционного взаимодействия

Уровень сложности Простой
Время на прочтение 6 мин
Количество просмотров 533

Всем привет!

Сегодня я расскажу про роли поставщика и потребителя в контексте информационных систем. Под поставщиками я подразумеваю информационные системы, которые передают информацию, а под потребителями – которые ее получают. Также расскажу об основных правилах игры, которые мы выработали у себя в команде.

Зачем нужны правила? Представьте, если бы светофоры в разных городах имели бы разную цветовую гамму. К сожалению, похожий бардак иногда встречается в различных областях нашей жизни, и сфера информационных технологий — не исключение!

Статья поможет структурировать информацию тем, кто проектирует информационные системы и взаимосвязи между ними.

Читать далее
Всего голосов 5: ↑5 и ↓0 +5
Комментарии 0

Как СБЕР превращает гигабайты данных в полезные знания, которые нужны сотрудникам и клиентам

Уровень сложности Простой
Время на прочтение 7 мин
Количество просмотров 2.8K

Центр корпоративных решений СБЕР занимается дистанционной поддержкой клиентов банка. Департамент обслуживает более 3 миллионов юридических лиц — сотрудники консультируют по телефону, отвечают на вопросы в чатах и делают рассылки. Также в структуре контакт-центра есть инструменты для клиентского self-service: виртуальный ассистент, чат-боты и справочник для бизнеса. Екатерина Горшенева, руководитель проектов по управлению знаниями, рассказывает, как разрабатывали свою платформу, какие результаты получили и в чем главная задача корпоративной базы знаний.

Раньше базу знаний развивали на платформе Confluence, но со временем назрел переход на собственное решение.

Читать далее
Всего голосов 15: ↑2 и ↓13 -11
Комментарии 6

Ближайшие события

Открытый урок «Behaviour Tree в Unity»
Дата 8 февраля
Время 19:00
Место
Онлайн

Капибара: открытый бета-тест

Время на прочтение 6 мин
Количество просмотров 4.4K

Капибара представляет собой уникальный проект, созданный группой энтузиастов в ответ на изменения на Пикабу, которые привели к потере его оригинального духа. Проект направлен на сохранение лучших сторон Пикабу, обеспечивая пространство для творческого самовыражения, где пользователи определяют ценность контента. Отличительной чертой "Капибары" является то, что тренды здесь создаются пользователями, а не алгоритмами, что способствует формированию сообщества единомышленников и выражению мнений.

Проект прошел несколько этапов разработки, включая формирование функциональных требований, CJM, Список фичей, определение архитектуры, разработку и успешный альфа-тест, на котором были выявлены и устранены наиболее критичные проблемы. На данный момент "Капибара" входит в новый этап своего развития – открытый бета-тест. Этот этап является важной вехой на пути к полноценному запуску проекта. Открытие бета-теста дает возможность всем желающим присоединиться к сообществу, оценить ресурс и внести свой вклад в его развитие. Код проекта находится в открытом доступе, позволяя участникам вносить свои предложения и улучшения в качестве авторов, пользователей, тестировщиков и разработчиков.

История проекта

Проект "Капибара", как идея, был зарожден 24 июля 2023 года в ответ на объявление о ключевых изменениях на пикабу . Ответный пост прожил всего час перед удалением, но за это время собрал огромное количество комментариев поддержки и предложения помощи в создании нового портала. Сразу после объявления идеи был создан телеграмм-чат, в который за первые сутки пришло 3,5 тысячи человек, а через несколько дней число участников достигло 9 тысяч. Из этого числа была сформирована команда разработчиков. Основная концепция "Капибары" заключалась в создании портала с акцентом на честной саморегуляции контента пользователями, прозрачности алгоритмов и открытом исходном коде. Ввиду острой потребности авторов в площадке для публикации уникального контента, команда быстро создала телеграм-бота, который принимал посты пользователей и публиковал их в канале, где другие могли оценивать и комментировать их.

Читать далее
Всего голосов 27: ↑22 и ↓5 +17
Комментарии 71

Как манекены калибруют томографы

Уровень сложности Средний
Время на прочтение 12 мин
Количество просмотров 1K

Привет, Хабр! В прошлой нашей статье про томографию мы задались вопросом: "А знаете, кто получает самую большую дозу при томографии?" Конечно, ответ мы получили: медицинские тестово‑калибровочные фантомы, специальные объекты, используемые при разработке и тестировании медицинских приборов. Тема оказалась настолько обширной, что мы решили продолжить и во второй статье ответили на вопрос: "Что такое пространственное разрешение в томографии и как его измерить?" В данной статье мы расскажем об антропоморфных фантомах для томографии. Сначала мы рассмотрим фантомы, которые моделируют тело человека, но без лишней детализации, дополним фантомами, которые моделируют определенный орган и его патологию. И, конечно же, расскажем, как такие фантомы помогают: 1. обучать, тренировать и экзаменовать врачей; 2. тестировать и калибровать рентгеновские аппараты и аппараты для компьютерной томографии; 3. разрабатывать методики измерения и снижения дозовой нагрузки. Фотографии, рентгенограммы и томограммы медицинских антропоморфных фантомов и манекенов прилагаются!

Читать далее
Всего голосов 14: ↑14 и ↓0 +14
Комментарии 4

Формализация WF2M сети на примере алгоритма Кофе-машина и два ученых

Уровень сложности Средний
Время на прочтение 12 мин
Количество просмотров 715

Предлагается WF2M сеть (From workflow to mathematic) с формализмом, обеспечивающим расчет движения маркера по сети workflow [WF2M23]. WF2M сеть основана на ЕРС (Event-Driven Process Chain) – событийная цепочка процессов: последовательность операций, управляемых событиями.

Ранее [CCSWF24] был приведен сценарий «кофе-машина и ученый» - как демонстрация формализма алгебры процессов CCS. Текущий пример формализации WF2M сети дополнен взаимодействием второго учёного, т.е. реализует более сложный сценарий: Кофе-машина и два ученых. Настоящую статью можно считать, как апробацию [WF2M23] на сценарии [CCSWF24].

Читать далее
Всего голосов 2: ↑2 и ↓0 +2
Комментарии 0

Управление процессами компании: бизнес и ИТ

Время на прочтение 13 мин
Количество просмотров 3.5K

Привет, Хабр! В продолжении темы, связанной с внедрением Каталога ИТ-услуг в компании, хочу разобрать достаточно популярный вопрос (не знаю, как у других, но у нас так точно) – зачем нужно возиться с услугами, если все пользователи работают с системами? Логичнее же «идти от систем», чем каких-то «никому не понятных услуг». Давайте разбираться и взвешивать все «за» и «против». Пусть каждый сам для себя решит, как эффективно выстроить процесс управления ИТ в общем и, взаимодействие с бизнесом, в частности.

Читать далее
Всего голосов 16: ↑15 и ↓1 +14
Комментарии 4

Часть 3. Представление вероятности безотказной работы системы в виде ряда Тейлора

Уровень сложности Средний
Время на прочтение 7 мин
Количество просмотров 1.5K

В технологии логико‑вероятностного моделирования для оценки важности отказов элементов сложных технических систем (СТС) применяются показатели одно, двукратной и к‑кратной значимости. В данной статье представлена вероятность безотказной работы системы в виде ряда Тейлора на основе к‑кратных совместных значимостей.

Представление функции вероятности безотказной работы системы в виде ряда Тейлора является эффективным средством для проведения углубленных исследований надежности, безопасности и живучести сложных технических систем. Функция ВБРС представлена на основе к‑кратных совместных значи‑ мостей, учитывающих влияние ряда отказов элементов на систему в целом. На основе представления ВБРС в виде ряда Тейлора выведен ряд показателей важности («весовых коэффициентов»).

Кроме этого, еще в 1981 году И.А. Рябинин обозначил широкий класс объектов моделирования под названием структурно‑сложных систем, не ограничиваясь сложными техническими системами. Технология логико‑вероятностного моделирования применима для исследования разнообразных объектов, имеющих сложную структуру и организацию. При этом вероятность может быть не только безотказной работы, но и риска возникновения опасного состояния, а также иных показателей: степени принадлежности или предпочтений, например при оценки рисков реализации проектов, кредитования и тому подобное.

In the technology of logic‑probabilistic modeling, to assess the importance of element failures of complex technical systems (CTS), indicators of one, two‑fold and k‑fold significance are used. This article presents the probability of the system's failure‑free operation in the form of a Taylor series based on k‑fold joint significances.

Читать далее
Всего голосов 2: ↑2 и ↓0 +2
Комментарии 0

Зачем и как практиковаться начинающему аналитику

Уровень сложности Простой
Время на прочтение 7 мин
Количество просмотров 8.5K

— Что работодатели хотят от джуниор аналитика данных?
— Работодатели хотят, чтобы он был мидлом.

Если ты не смеёшься над этим анекдотом, то наверняка недавно закончил (либо заканчиваешь) обучение по обретению специальности «Аналитик данных». А ещё ты пока не нашел, но уже начал искать свою первую работу. Меня зовут Ольга Матушевич, я наставник на курсе «Аналитик данных» в Практикуме. В этой статье я предложу решение проблемы «как получить опыт работы, если без опыта никуда не берут» с помощью самостоятельных проектов. 

Читать далее
Всего голосов 9: ↑7 и ↓2 +5
Комментарии 6

Оценка потенциальной производительности информационных систем на задачах OLTP

Время на прочтение 30 мин
Количество просмотров 1.3K

Все мы сегодня наблюдаем неприятное явление деградации эффективности ПО. Эффективность проседает во всём, от неэффективного пользовательского интерфейса и до того, в чём компьютеры, вроде бы, просто обязаны быть самыми быстрыми, то есть в массовых задачах повседневной обработки информации.

Решение задачи повышения производительности ПО не может быть получено без понимания, а на что мы в принципе можем рассчитывать? Именно такую отправную точку и предлагается рассмотреть в данном тексте.

Далее показаны потенциальные возможности ПО на самых массовых на сегодня задачах, заключающихся во взаимодействии оператора с информационными системами. Англоязычное название этой группы задач - on-line transaction processing (OLTP). К этому классу, в том числе, относится всё взаимодействие с браузером, которые представляют клиентскую часть системы. За кадром, невидимая для операторов, остаётся почти чистая задача параллельной обработки множества запросов.

Читать далее
Всего голосов 4: ↑3 и ↓1 +2
Комментарии 5

Вклад авторов

Работа