Как стать автором
Обновить

Администрирование

Сначала показывать
Порог рейтинга

Как мы построили корпоративную шину данных на Kafka, которая обрабатывает до 3 млн сообщений в секунду

Блог компании Почтатех Блог компании Конференции Олега Бунина (Онтико) Высокая производительность *IT-инфраструктура *Apache *

Привет! Меня зовут Иван Гаас, я руковожу автоматизацией процессов разработки в Почтатехе — компании, создающей цифровые продукты для Почты России.

Среднее количество сообщений, которые мы обрабатываем в Почте — от 500 тысяч до миллиона в секунду. В пики, когда наша big data прогоняет свои 25 петабайт данных — до 3 миллионов. При этом кластер Kafka состоит всего из 12 серверов в каждом из 3 дата-центров и справляется с этим.

C 2016 года мы в три раза увеличили количество новых цифровых сервисов. Корпоративная шина на Kafka помогла быстро масштабироваться: количество интеграций за последнее время упало с 1000 до 300 и теперь растёт незначительно. Если раньше интеграция сервиса растягивалась на месяцы, то теперь достаточно нескольких дней.

Я расскажу, как мы построили шину, которая обеспечивает такую производительность.

Читать дальше
Всего голосов 8: ↑7 и ↓1 +6
Просмотры 672
Комментарии 1

Новости

Linux LiveCD на базе CentOS и техники его использования в PXE-загрузке через Foreman

Блог компании HOSTKEY Хостинг Настройка Linux *Серверная оптимизация *Серверное администрирование *

Создатели дистрибутивов Linux предлагают пользователям пригодные для работы без установки образы операционных систем, однако универсальные сборки плохо подходят для задач хостинга. Рассказываем, как мы в HOSTKEY создали собственный LiveCD на основе CentOS и в итоге получили удобную управляемую систему сборки и доставки LiveCD.

Читать далее
Всего голосов 4: ↑4 и ↓0 +4
Просмотры 1.2K
Комментарии 0

Распространить сертификат в кратчайшие сроки среди станций Windows любой ценой

Системное администрирование *

В начале пандемии ’20 появилась задача - распространить корневой сертификат среди домашних персональных компьютеров, так как большое количество сотрудников стали работать по домам.

Сейчас прилетела задача распространить сертификат Минцифры.

В домене все понятно, добавил сертификат в политики GPO и поехали.

А как быть с локальными (домашними) станциями Windows?

Читать далее
Всего голосов 5: ↑5 и ↓0 +5
Просмотры 2.6K
Комментарии 10

8 мифов о микропроцессорах RISC-V — ответ критикам

Блог компании Selectel IT-инфраструктура *Компьютерное железо Процессоры
Перевод

Для начала хочу пояснить, почему я решил перевести этот текст Эрика Энгейма. На волне изменений в мире актуальным становится вопрос открытости программного и аппаратного обеспечения. И если с ПО ситуация относительно понятная — open source цветет, то в аппаратном обеспечении по-прежнему доминируют закрытые архитектуры CPU — x86, ARM, PowerPC и другие. Исходя из этого особенно интересно следить за одной из немногих открытых (и главное — живых) архитектур RISC-V.

В этой статье автор рассказывает, почему критика архитектуры RISC-V не очень оправдана. Он развинчивает 8 мифов вокруг нее и приходит к выводу в духе «хейтеры просто не умеют ее готовить». Если интересно, перевод классного текста под катом.

Похоливарить на тему RISC-V
Всего голосов 44: ↑42 и ↓2 +40
Просмотры 6K
Комментарии 3

Как отобрать у микроконтроллера QN902x его прошивку

Беспроводные технологии *C *Реверс-инжиниринг *Программирование микроконтроллеров *

Когда у меня появился умный чайник Xiaomi Mi Smart Kettle Pro - у меня возник тот же вопрос, что и у многих его пользователей: почему его нельзя включить удаленно? Чайник позволяет подключиться к нему через блютуз, задать температуру которую он будет поддерживать и еще пару незначительных параметров, но его невозможно удаленно включить, что нивелируют его ценность как компонента умного дома.

Читать далее
Всего голосов 46: ↑46 и ↓0 +46
Просмотры 4.9K
Комментарии 17

Tarantool 2.10: сжимаем данные, шифруем трафик, помогаем расследовать инциденты

Блог компании VK Высокая производительность *Хранение данных *Tarantool *

В Tarantool 2.10 добавили новые инструменты как для Enterprise версии, так и для Community Edition. А еще мы запустили Tarantool по модели DBaaS в облаке VK Cloud Solutions. Далее подробно расскажем про главные обновления: шифрование соединений между репликами и клиентом, сжатие данных в памяти, расширенные возможности аудита и поделимся ссылкой на полный список изменений

Читать далее
Всего голосов 31: ↑31 и ↓0 +31
Просмотры 2.2K
Комментарии 2

ИТ в России – 2022: повторится ли иранский сценарий?

Блог компании ICL Services IT-инфраструктура *Исследования и прогнозы в IT Бизнес-модели

Уход зарубежных компаний и увеличивающийся объем санкций в отношении России порождают массу сравнений с другими странами, которые ранее проходили подобный этап в своей истории – например, Иран. Как устроена ИКТ-отрасль в Иране в условиях многолетних ограничений? Есть (и будут) ли препятствия и сценарии принятия решений в российском секторе ИКТ с оглядкой на иранский санкционный опыт? Разбираемся в этой статье.

Читать далее
Всего голосов 46: ↑33 и ↓13 +20
Просмотры 23K
Комментарии 78

Synology NAS добавляем сервер точного времени с синхронизацией от GPS

Настройка Linux **nix *Компьютерное железо Накопители
Из песочницы

Казалось бы, что ещё нужно для счастья? Купил железку, воткнул жесткий диск, прикрутил камеры, сервер почты, хранилище фоток итд, что ещё нужно от этой несчастной железки? Ну в принципе можно было бы и отстать, но потенциал-то есть, внутри нормальный линукс. Когда дома становится куча гаджетов, камер, телефонов, ноутбуков начинает появляться желание , дабы везде было одно время.

И в принципе можно прописать какой-то чужой сервер точного времени, но мы не ищем легких решений.

Итак приступаем. Сначала надо найти подходящий usb GPS приёмник. В моём случае попался старенький globalsat. У моего приёмника внутри оказался rs->usb pl2303 , но может оказаться ftdi итп, тут надо искать , тот что можно прикрутить. Втыкаем его в USB Synology NAS и ..... и ничего.

Логинемся на NAS по ssh , для удобства сразу становимся root ( sudo -i )

делаем

https://habr.com/ru/post/79629/?ysclid=l1u
Всего голосов 7: ↑6 и ↓1 +5
Просмотры 2.5K
Комментарии 10

Всегда под рукой: настольные справочники по работе с Linux для начинающих сисадминов (и не только)

Блог компании T1 Cloud Open source *Системное администрирование **nix *Профессиональная литература

Мы в T1 Cloud запускаем серию публикаций для ИТ-специалистов. Начнем с компактного дайджеста книг по администрированию Linux. В подборку вошли новые материалы, уже успевшие «промелькнуть» на профильных площадках, а также литература, которая только готовится к релизу.

Читать далее
Всего голосов 6: ↑6 и ↓0 +6
Просмотры 4.4K
Комментарии 4

«Золотой стандарт» или что умеют современные Deception-решения: ловушки и приманки. Часть 1

Блог компании R-Vision Информационная безопасность *Сетевые технологии *
Tutorial

"Золотой стандарт" или что умеют современные Deception-решения: ловушки и приманки. Часть 1

Читать далее
Всего голосов 3: ↑3 и ↓0 +3
Просмотры 835
Комментарии 0

Практические истории из наших SRE-будней. Часть 6

Блог компании Флант Системное администрирование *Серверное администрирование *DevOps *Kubernetes *

В очередном сборнике из недавних кейсов в нашей практике расскажу, как мы продлевали root-сертификаты Let's Encrypt для старой CentOS, боролись с внезапным переключением DNS и Ingress, решали непростую задачу с шардами в Elasticsearch и не только.

Читать далее
Всего голосов 36: ↑36 и ↓0 +36
Просмотры 2.2K
Комментарии 2

Esperanto: не только язык, но и производительный 1000-ядерный RISC-V процессор для систем машинного обучения

Блог компании Selectel IT-инфраструктура *Машинное обучение *Процессоры IT-компании

Постепенно в индустрии производства процессоров развиваются альтернативные архитектуры, на базе которых создают весьма примечательные чипы. Так, стартап Esperanto Technologies представил собственную версию RISC-V процессора, причем не обычного, а высокопроизводительного, предназначенного для работы с ИИ-системами и машинным обучением. Мы уже не раз писали об экспериментах в этой отрасли, давайте посмотрим, что это за новинка.
Читать дальше →
Всего голосов 38: ↑37 и ↓1 +36
Просмотры 5.8K
Комментарии 7

Сам себе Роскомнадзор

Сетевые технологии *

Список заблокированных РКН ресурсов для использования с VPN стремительно теряет актуальность, поскольку, во-первых, многие ресурсы блокируются или замедляются на ТСПУ и записи для этих ресурсов в выгрузку не вносятся, во-вторых, после известных событий конца февраля многие ресурсы начали изображать РКН из себя и блокировать доступ с российских IP, в-третьих, избыточная отправка трафика в VPN приводит к недоступности уже российских ресурсов, которые отгородились от иностранных IP.

Поэтому на уже известном сервисе antifilter.download создан отдельный дополнительный сервис community.antifilter.download, предназначенный для ведения списка при помощи сообщества.

Читать далее
Всего голосов 11: ↑10 и ↓1 +9
Просмотры 14K
Комментарии 35

Как создать цифровой двойник электроэнергетического объекта. Часть 1. Sampled Values

Блог компании ЦИТМ Экспонента Сетевые технологии *Прототипирование *Matlab *Энергия и элементы питания

Так вышло, что испытания релейной защиты обязательно проводят на специальных комплексах в режиме реального времени. Внутри этих комплексов находятся цифровые двойники электроэнергетических объектов. Чтобы разобраться как и зачем их туда загружают, мы прольем свет на всеми любимый и ненавистный стандарт МЭК 61850 и поделимся своим опытом моделирования энергосистем на КПМ РИТМ.

Читать далее
Всего голосов 5: ↑4 и ↓1 +3
Просмотры 1.7K
Комментарии 11

Что болит у техлидов и DevOps-инженеров?

Блог компании Конференции Олега Бунина (Онтико) Управление разработкой *Конференции DevOps *

В этом году DevOps & TechLead Conf 2022 пройдут на одной площадке. Участников ждут погружение в инженерные процессы в IT (от XP до devOps & beyond), musthave-инструменты и практики изменений в командах для быстрых и качественных релизов.

Мы встретились с экспертами из Программного комитета конференций — Дмитрием Зайцевым и Анастасией Асеевой-Нгуен. Поговорили о болях DevOps-инженеров и техлидов, о новых форматах и о самых актуальных темах в индустрии. О том, что получилось — читайте под катом.

Читать далее
Всего голосов 8: ↑7 и ↓1 +6
Просмотры 2.3K
Комментарии 1

Псс, парень… индекс нужен?

Блог компании Тензор Высокая производительность *PostgreSQL *SQL *Администрирование баз данных *

Самый больной вопрос для любого разработчика, которому приходится вычитывать данные из базы: "Как сделать мой запрос быстрее?". Классический ответ - необходимо создать подходящий индекс. Но куда именно его стоит "накатывать", да и как вообще он должен выглядеть?..

Мы научили наш сервис визуализации планов PostgreSQL отвечать на эти вопросы, и под катом расскажем, чем именно он руководствуется в своих рекомендациях.

Читать далее
Всего голосов 19: ↑19 и ↓0 +19
Просмотры 5.4K
Комментарии 22

САПР системы и их основные направления. Внедрение BIM в объектную модель

Блог компании Bimeister IT-инфраструктура *CAD/CAM *IT-компании

Хей йо, Хабр! Меня зовут Королёв Николай. Я инженер-конструктор компании BIMeister и при этом успеваю доучиваться в Московском Политехническом Университете на факультете машиностроения. Наш отдел разрабатывает высокодетализированные 3D модели для крупнейших компаний на рынке, к примеру, Газпром, а также внедряет BIM технологии в объектные модели.

Сегодня я расскажу, что такое САПР системы и для чего нужны BIM технологии.

Читать далее
Всего голосов 6: ↑4 и ↓2 +2
Просмотры 984
Комментарии 7

Чего вам это стоит: из чего складывается стоимость владения IP-АТС 3CX

Блог компании АйПиМатика IT-инфраструктура *Системное администрирование *

Многие пользователи «железа» и ПО считают, что такие товары (не только для бизнеса, но и для себя лично) должны быть приобретены раз и навсегда. Например, наши пресейл-инженеры регулярно получают запросы на телефонные станции «в коробке» или в виде «вечного» ПО, чтобы «можно было купить АТС один раз и пользоваться ей „всегда“.


Действительно, многие компании покупают „железные“ IP-АТС и считают, что такая система будет работать десятилетия. Однако момент физического выхода оборудования из строя наступает неожиданно, бюджеты на новое оборудование не запланированы и решить проблему быстро никто не может. В том же положении оказывается компания и в случае морального устаревания старой техники или расширения компании, когда система требует значительного масштабирования.


old_pbx.jpg
Читать дальше →
Всего голосов 6: ↑5 и ↓1 +4
Просмотры 806
Комментарии 8

Настройка DKIM, SPF, DMARC и rDNS в Carbonio

Блог компании Zextras Спам и антиспам
Tutorial

Более 90% от общего объема мирового трафика электронной почты сейчас составляет спам. Это побуждает системных администраторов и держателей публичных почтовых серверов максимально крепко закручивать гайки и  отклонять электронные письма даже при малейших подозрениях на их неблагонадежность. Чтобы электронное письмо, отправленное с вашего почтового сервера с большой вероятностью дошло до адресата, у вашего сервера должны быть настроены DKIM, SPF, DMARC и rDNS. Эти механизмы позволяют принимающим почту серверам автоматически отсеивать электронные письма без анализа их содержимого. В данной статье мы расскажем о том, как корректно настроить DKIM, SPF, DMARC и rDNS в Carbonio.

Читать далее
Всего голосов 2: ↑1 и ↓1 0
Просмотры 853
Комментарии 2