20
Октябрь
0 Комментариев
Категории: Raspbian

Умный дом с HTU21D + BMP180 + BH1750FVI и Raspberry pi 3+

Купил себе Raspberry Pi 3+ и заказал несколько датчиков для построения умного дома. Это мой первый опыт в этом деле и я постараюсь описать как можно больше подводных камней при работе с моими купленными датчиками и малиной.

19
Октябрь
0 Комментариев
Категории: Без рубрики

Очистка джоб в EMR/Hadoop в Unix/Linux

Amazon EMR – ведущая в отрасли облачная платформа больших данных для обработки огромных объемов информации с использованием инструментов с открытым исходным кодом, таких как Apache Spark, Apache Hive, Apache HBase, Apache Flink, Apache Hudi и Presto. EMR позволяет анализировать данные в масштабе петабайтов более чем в два раза дешевле, чем традиционные локальные решения, и более чем в 3 раза быстрее, чем при стандартном использовании Apache Spark. Для коротких заданий можно развертывать и отключать кластеры, оплачивая использованные инстансы на посекундной основе.

19
Октябрь
0 Комментариев
Категории: Без рубрики

Установка awless в Unix/Linux

awless — представляет собой мощный, инновационный и небольшой интерфейс командной строки (CLI) для управления веб-службами Amazon.

Создаем GitHub workflows с actions в Unix/Linux

Недавно, в GitHub появилась возможность использовать workflows для различных задач. Например, можно сделать флов для проверки вашего кода перед тем как код будет смерджен в какую-то из бранчей ( например — master). Я приведу пример использования lint для Terrafrom-а, т.е я хочу чтобы код работал не только у меня локально, но и после того как я его запушу в репозиторий — он будет проходить проверку и даст мне знать если что-то пойдет не так.

19
Октябрь
0 Комментариев
Категории: Без рубрики

Копирование данных с S3 в другой AWS регион/аккаунт в Unix/Linux

Иногда приходится копировать данные с одного AWS региона в другой. Или, с одного аккаунта (одного региона), в другой AWS аккаунт какого-то региона. Все в голове не удержишь, та и гуглить всегда леть. По этому, решил оставить замутку чтобы она была под рукой.

13
Октябрь
0 Комментариев
Категории: Без рубрики

Создание AWS EKS кластера в Unix/Linux

Amazon EKS — это управляемый сервис, который упрощает запуск Kubernetes на AWS без необходимости установки, эксплуатации и обслуживания мастер нод в Kubernetes.

13
Август
0 Комментариев
Категории: Без рубрики

Параллелизм на Python в Unix/Linux

Давно интересовался как можно распараллелить выполнение ресурсов при написании кода на Python. Года 2 назад, даже пробовал что-то написать, но для меня это было сложно т.к не имел большого опыта на данном языке программировании. Все жизни меняется, прогресс не стоит на месте, так получилось — я тоже не сидел на месте и изучал питон. Накапливал опыт с каждым написанным скриптом и его логикой. Совсем недавно, я сменил работу и прийдя на новое место, познакомился с одним из очень крутых чуваком на проекте.

7
Август
0 Комментариев
Категории: Groovy

Использование Groovy + HTTP requests в Unix/Linux

На работе, используют Дженкинс и по этому, таска упала — написать ( переписать использующий код шел-экзеков) groovy сприпты для shared library (кто не знает что это — это библиотека которую можно подключить и вызывать написанный код в ваших пайплайнах). Вопрос зачем юзать Дженкинс — я не стал спрашивать на данном этапе конечно, возможно и стоило. Но работа — есть работа.

Can’t open PID file /var/run/nginx.pid (yet?) after start: Too many levels of symbolic links

Зашел на сервер я такой, думаю — обновлю его ( давно не ставил обновы на него). Выполнил апдейт. Захотел кое-что поменят в конфиге с nginx ( менял то, что не должно было поломать веб-сервер). Но после рестарта службы — веб-сервер лег вообще… Обидненько!