Один из наших читателей обратил наше внимание на Espressif IoT Development Framework. Он нашёл ошибку в коде проекта и поинтересовался, смог бы её найти статический анализатор PVS-Studio. Именно эту ошибку анализатор пока найти не может, зато нашёл множество других. По мотивам этой истории и найденных ошибок, мы решили написать классическую статью про проверку открытого проекта. Приятного изучения того, из-за чего IoT устройства могут "выстрелить вам в ногу".

Для любых отношений, любого устройства и любой программы есть период привыкания — отрезок времени, за который человек понимает принципы взаимодействия, разбирается в нюансах, находит свои фишки, определяет достоинства и недостатки и т.д. Так происходит с новыми коллегами, друзьями, новой работой, смартфоном, ноутбуком и т.д. Все мы когда-то испытывали это странное ощущение, состоящее из смеси любопытства, интереса, осторожности и лёгкого недовольства — ведь человеческой природе вполне обоснованно неприятны перемены в окружающей среде.

Когда вы покупаете CRM-систему, все эти чувства испытывает не один человек, а сразу большая часть сотрудников, причём у каждого свои претензии, вопросы и опасения. А ведь эта технология должна начать работать на благо компании и делать это эффективно и желательно сразу. Давайте посмотрим, что нужно делать на старте, чтобы не наступил он — ***дец.

Много слов уже сказано о доверительных интервалах для оценки параметра в байесе и частотке. Существуют десятки объяснений, но ни одно из них не показывает "на пальцах", чем отличаются механизмы создания этих интервалов. Так вот давайте еще и я попробую объяснить вам так, чтобы вы больше никогда не конфузились при их упоминании.

Уже не первый год пользуюсь своим универсальным конвертером CSV файлов в БД SQL Server - ImportExportDataSql, который имеет ряд полезных функций, необходимых любому разработчику БД MSSQL, например: перенос данных с одной БД в другую через SQL скрипт, выгрузка структуры БД, загрузка/выгрузка файлов (с типом varbinary), объединение SQL выборок в один файл и др.

ImportExportDataSql бесплатный, портативный, без рекламы и оповещает об обновлениях.

Поставил себе цель, ускорить загрузку CSV в БД MSSQL быстрее, чем это делает стандартная утилита "bcp". В моем приложении используется стандартный способ чтения CSV файлов, через System.IO.StreamReader методом ReadLine, но я уверен, что стандартные способы не самые производительные.

Итак, сравним несколько библиотек, написанных на языке C#, которые читают CSV файлы и разбивают строку на массив строк (колонки). Результаты тестов будут складываться по нескольким параметрам: время выполнения, потребление оперативной памяти, средняя нагрузка CPU (%).

Подробные результаты тестов, а также исходники для тестирования описанных способов, приведены в конце статьи.

Привет! Меня зовут Анастасия, психолог и много консультирую IT-специалистов. И я вижу большое сходство в работе тимлида и психолога. В чём оно? Работа с людьми, безусловно. А если конкретнее, как думаете? 

Привет, Хабр!

У нас готовится к выходу второе издание легендарной книги Марка Симана "Внедрение зависимостей на платформе .NET".



Даже в такой объемной книге вряд ли возможно целиком охватить подобную тему. Но мы предлагаем вам сокращенный перевод очень доступной статьи, излагающей суть внедрения зависимостей простым языком — с примерами на C#.

В этой статье описан рецепт по настройке самодокументирующегося сервера на joi, swagger и typescript. Бонусом приведен Gulp-скрипт, который на основе Joi-объектов будет генерировать нам интерфейсы.

Это история сделки с биткоинами — самой крупной в моей жизни. К этой сделке меня привело глубокое, но безумное исследование криптоэкосистемы. И это история о том, что на самом деле происходит в крипте — и что с этим делать.

Если у вас есть значительные объёмы криптовалюты или вы подумываете о её покупке, то именно для вас я это написал. Пожалуйста, прочтите до конца.

В вопросах производительности BI обычно приходится искать компромисс между скоростью работы аналитики и объемами данных, над которыми она реализована. Впрочем, существуют способы “убить двух зайцев” сразу, и сегодня я хочу поделиться нашим опытом интеграции Visiology с платформой Arenadata при построении гибридной модели работы BI.

Собеседование инженера программиста сегодня часто включает в себя некий тест или упражнение на программирование, и я думаю, что это очень плохая вещь. Вот почему.

В прошлом году в Tarantool была проведена колоссальная работа по реализации синхронной репликации. При этом мы придерживались алгоритма Raft. Вся работа была разделена на два крупных этапа: так называемую кворумную запись, то есть синхронную репликацию, и автоматические выборы лидера.

Синхронная репликация появилась в релизе 2.5.1, а в конце октября в релизе 2.6.1 появилась поддержка автоматических выборов лидера на основе Raft.

Меня зовут Сергей Петренко, и я участвовал в разработке этих больших фич. Сегодня я расскажу, как они устроены, а также коснусь конфигурирования выборов лидера и новых возможностей, которые алгоритм Raft даёт пользователям Tarantool.

Мутировавшие двухметровые дейнонихи прославились в блокбастере Спилберга «Парк Юрского периода» (1993 г.), где были оскорбительно именованы велоцирапторами. В фильме они изображались как очень умные высшие хищники, охотившиеся группами на крупную добычу и разрывающие её на куски своими серповидными когтями. Тем не менее рапторы-волки, вероятно, никогда не существовали.

Аргументы в пользу волчьего поведения всё чаще опровергаются, а присвоенные ранее доказательства стайности дейнонихов в виде следов зубов на костях растительноядных тенонтозавров сейчас оспариваются с точки зрения возможной силы укуса эудромеозавров [1]. Несмотря на изначально общее принятие доказательств стайной охоты рапторов на динозавров в прошлом, предложенные ныне покойным знаменитым палеонтологом Йельского университета Джоном Остромом доказательства «разумной» стайности относительно слабы.

Проблема данной идеи заключается в том, что современные живые динозавры (птицы) и их родственники (крокодилы) нечасто охотятся группами. Кроме того, размер мозга вышеупомянутых ящеров не больше, чем у современных варанов, которые хоть и охотятся порой в группах, однако не имеют строгой иерархической системы внутри «стаи». Иерархия в стае динонихов наблюдается лишь в фантазиях режиссёра фильма «Мир Юрского Периода» [3].

Помимо этого, окаменелые свидетельства стайной охоты так или иначе являются спорными, зато свидетельства фатальной внутривидовой агрессии не являются таковыми [2;3]. Поэтому мы не можем однозначно сказать, действительно ли животное действовало в команде в процессе охоты на крупную дичь, или же оно охотилось в одиночку.

Мы можем предположить такую модель поведения хищников, но только в том случае, если стайная охота будет больше похожа на охоту комодских варанов или крокодилов, в которой животные могут нападать на одно и то же животное вместе в несобранной группе. Т.е. группа будет не скоординирована. Внутри такой группы могут быть внутривидовые убийства, а молодняк в ней будет держаться где-нибудь в стороне от взрослых.

Utm-разметка для систем сквозной аналитики — тёмный лес или страшный кошмар специалиста?

Ни то ни другое — если сразу придерживаться правил и логики. Да, большинство компаний задумывается о том, что хорошо бы отслеживать коммуникации с клиентом с самого начала. Но происходит это, лишь когда появляется необходимость в сквозной аналитике.

И речь идёт не о том, имеются ли у компании правила разметки для любого из каналов коммуникации. Речь о том, чтобы связать эти каналы воедино и иметь прозрачную структуру utm-меток во всех каналах сразу. И это действительно важная задача.

Чем раньше вы начнёте прорабатывать этот момент, тем лучше. Потратьте сейчас время, изучите базовые правила формирования utm-меток, проведите аудит данных и другие шаги на пути к созданию правильной utm-разметки. А когда бизнес уже будет стабильно расти и внедрение сквозной аналитики станет очевидным — на руках уже будет необходимая история развития.

В конце 2017 года я твёрдо решил, что хочу перейти на руководящую работу.

Программирование само по себе привлекало меня гораздо меньше, чем то, что происходило на уровень выше, а именно обдумывание бизнес-процессов, планирование архитектуры приложений и организация работы.

Я чувствовал себя не столько садовником, который день за днём возделывает маленький клочок земли, наблюдая за проклёвывающимися сквозь землю ростками, сколько фермером, которому надо собрать, а затем продать урожай с гигантского поля размером с европейскую страну.

Масштабность и эффективность меня вдохновляли.

Чуть больше года назад я получил приглашение на работу от датской компании Grundfos на должность Big Data Engineer, и эмигрировал со своей женой в небольшой город Viborg на западе Дании. В этой статье я расскажу вам о процессе поиска работы, прохождении собеседований, интеграции эмигрантов в общество, и стране в целом. Надеюсь, мой опыт кому-нибудь пригодится.

Предыстория

Для начала - немного о себе. Мне 29 лет, закончил бакалавриат НГТУ по специальности "ПО вычислительной техники и автоматизированных систем". После окончания ВУЗа чуть больше работал тестировщиком в Новосибирском офисе 2GIS. Затем полгода поработал в тестировании мобильных приложений, а затем перетёк на фриланс-биржу Upwork. Работал на ней около года C# программистом/дата-инженером, перебиваясь всякими мелкими проектами, а потом нашёл там же долгосрочный контракт от от швейцарской digital-marketing компании Cleoo. Поработал на них ещё два года, а потом начал искать, где трава зеленее, и в итоге оказался в Дании.

Причины для переезда

Где-то в марте 2018 года мой швейцарский работодатель пригласил всех сотрудников, работающих удалённо, на недельный тимбилдинг в Берне, и эта поездка до сих пор вспоминается мне как что-то совершенно неописуемо. Я никогда раньше не выезжал за пределы России, и вот этот уровень уличного благоустройства, качества воды и воздуха, общественный транспорт, да и просто люди на улицах произвели на меня совершенно неописуемое впечатление. Вскоре после возвращения из поездки я немного успокоился, начал читать о жизни в других странах и возможностях для переезда, и через несколько месяцев уже твёрдо для себя решил, что я хочу жить либо в самой Швейцарии, либо хотя бы в стране, которая сравнима с ней по уровню жизни.

Свою роль сыграло ещё и то, что вскоре после этой поездки я успел жениться, что, как мне кажется, тоже повлияло на процесс принятия решений. Уже становится немного несолидно бегать по барам и зависать в компьютерных клубах по несколько дней подряд - появляется ответственность, и нужно начинать думать о будущем, хотя бы чуть-чуть.

Машинное обучение. Все о нём говорят. Много кто. Большая тема – но покрытая этой жуткой мистикой. Как магия – есть дар, сможешь что угодно сделать. Если нет... вообще не понятно, как подступиться. Постоянно фигурируют какие-то numpy, pandas, scikit-learn. На каждую из них фигурирует по двухтомному учебнику и куче доков.

Хочу в этой статье развеять мистику. Давайте чего-нибудь обучим, и найдём закономерности в большом наборе данных. Может и предскажем что-нибудь, даже. На простом, добром питоне – без всякой библиотеки в два гигабайта, и с минимальным входным порогом знаний.

Интересно? Прошу под кат.

Спустя четыре года после того, как в Xerox разработали первую в истории пользовательскую среду с оконным графическим интерфейсом, американская компания Digital Research, Inc. создала собственную оконную платформу, оснащенную практически всеми компонентами, характерными для современных ОС. Если бы колесо истории повернулось в другую сторону, а обстоятельства сложились несколько иначе, она вполне могла бы занять место Windows в мире операционных систем. В сегодняшней историческо-ностальгической статье мы вспомним эту ушедшую и неоправданно забытую технологию.

Сервисы падали, падают и будут падать

Когда вы быстро растете, микросервисы начинают появляться буквально по щелчку пальцев и в самых неожиданных местах. В таких условиях каждая команда обычно на ходу решает, где, как и какие логи будет складывать. Когда сначала 10, потом 20, а там и более команд логируют по-своему, начинается хаос.



Например, наша команда сопровождения маркетинга в Skyeng знала: пользователь с таким-то айдишником нажал в личном кабинете кнопку «Сменить преподавателя» — постучался в наш сервис, дальше ушло три сообщения, в очереди было 2 вызова сервисов и эти сервисы ответили 200. Но на самом деле, что было у команд сопровождения учителей или биллинга, к которым мы стучались, не знал никто…

Тогда мы придумали инструмент, чтобы маркировать трафик

О витамине D, витамине К2 и сложностях внутривидовой конкуренции

Внутривидовая борьба всегда самая жестокая. Представители одного вида нуждаются в одних и тех же ресурсах: территории, половых партнерах, кормовой базе или клиентах в инстаграме. Даже когда волк гонится за зайцами, то зайцы борются не с волком, а друг с другом — победит тот, кто бежит быстрее конкурента.

Выявлять дефицит и назначать витамин Д — дело нехитрое, поэтому вдумчивых инстаграм-докторов, которые лечат причины, а не симптомы, хватает с лихвой. Простые и комфортные для людей ответы всегда продаются хорошо. Но ресурсы кормовой базы ограничены, поэтому вдумчивым докторам приходится постоянно бравировать новыми сакральными знания из закрытых телеграм-каналов, чтобы выделяться на фоне конкурентов. Из-за этого появляются нестандартные референсы анализов, мудрёные способы приема препаратов [Вигантол смешать, но не взбалтывать] или дизайнерские комбинации уже известных БАДов.

Популярным стал хайп, что витамин Д нельзя принимать без витамина К2. Аргументируют тем, что без витамина К витамин Д плохо всасывается, не раскрывает свои эффекты на костную ткань и выше риск токсических проявлений. В отношении влияния на костную ткань нафантазировать точки пересечения еще можно: витамин К необходим для карбоксилирования остеокальцина, который участвует в минерализации костной ткани. Как витамин Д и витамин К влияют на всасывание друг друга — моей фантазии и ремесленных познаний не хватило.

В команде разработки завёлся разработчик, который халтурит, и ты ничего не можешь с этим поделать. Если у вас никогда не было такого опыта, я вам завидую.

В былые времена у всех, от стажёра отдела QA до руководства, имелся какой-нибудь опыт кодинга. Те времена давно уже миновали, и теперь у нас есть несколько уровней «мастеров» методологии и менеджеров, за свою жизнь не написавших ни строки, считающих любые жалобы на чужую работу самовольством и личными конфликтами, а также не принимающих никакой критики своих технических навыков.

Если я скажу, что тот или иной член команды халтурит, и даже объясню всё вежливо и с техническими подробностями, менеджеры воспримут это как «ссору» и сосредоточат всё своё внимание на сплочённости коллектива, подразумевая, что проблемы создаю именно я.