Serverless как подход для построения решений​

Часто под serverless подразумевают только вычисления и функции типа aws lambda. Но serverless намного шире, это не только вычисления но и хранение данных, интеграции, бизнес процессы.

New article and new attempt to summarize my next experiments with Consul. In article below, you can find aggregated review, links, code and other materials. I created a simple demo and based on this staff I would like to describe my findings and thoughts.

The Goal​

Very simple and stupid idea. I want to have test environment and ability to test Consul in different configurations and in different topology.

I wrote a big article about Kubernetes here, which covers a lot of aspects of working with Kubernetes.

One more article in Kubernetes context was about Service Mesh pattern.

It is time to write third article. It is time to write an article that should cover the native Kubernetes features to allows us to secure network interactions between our applications and services in K8s.

Написал я свой первый if err != nil ...

Вторая половина 2023го года выдалась довольно сложной и как результат было мало времени заниматься полноценными статьями. Но, несмотря на это цифры статистики по блогу получились довольно интересными: +14100% роста по пользователям - это прям отличный результат :).

Шифрование трафика​

Простой способом зашифровать данные, передаваемые по сети - это протоколы SSL и TLS. Они расположены на уровне представления (presentation) данных, на 6-ом уровне модели протокола TCP / IP, что позволяет без проблем использовать их для прикладных протоколов 7го уровня (HTTP, WebSocket, ...).

Введение​

На этой странице будет справочник терминов. Чтобы был под рукой и можно было ссылаться на него из других статей.

Статьи серии:

Architectural Decision Records (ADR)
Architectural Decision Records (ADR). Y-Statements

Кратко о том, что такое Service Mesh.

Service Mesh​

Service Mesh - это паттерн, идея или можно назвать это подходом. Когда мы говорим, что хотели бы сделать Service Mesh, стоит уточнять для чего и как мы хотим его реализовывать. Разные реализации Service Mesh имеют разный набор фич, свойств, особенностей.

Статьи серии:

Architectural Decision Records (ADR)
Architectural Decision Records (ADR). Y-Statements

Статьи серии:

DDD. Что это такое?
DDD. Единый язык. Ubiquitous language

Статьи серии:

DDD. Что это такое?
DDD. Единый язык. Ubiquitous language

What is Kubernetes and what is it for?​

Kubernetes - this is a system to automated management of containerized applications. This is a system which was developed for automated deployment, scaling and coordinating containers in cluster. With Kubernetes, you can maximize utilization of compute resources in your cluster.

What is monolithic architecture pattern?​

Monolithic architecture - monolithic application is a single unified software application which is self-contained and independent from other applications, but typically lacks flexibility.

Monolithic architecture - Design an architecture that structures the application as a single deployable/executable component that uses a single database.

What am I trying to do?​

I want to combine existing APIs and provide simple way for clients to pull data in different use cases. At the same time, all separated services which I would like to use have common data model with unified and common identifiers (for example - plantId).

What is this?​

This is an architecture with single logical storage for data and loosely coupled services. Communications between services should be organized through data layer.

"Data-oriented architecture" - means, think about data and storage first and then about services to process this data. This is true for the applications where data is the main value.

API Gateway pattern​

Then our application consists of a set of microservices it would be a wrong decision to implement interactions between clients and services directly as drawn on diagram below

C# properties (свойства) - это почти как getter и setter в Java.

Using Properties (C# Programming Guide)

Свойство в C# - это специальный член класса, который можно использовать как поле, но доступ к значению обрабатывается в специальных функциях.

Expression-bodied members (C# programming guide)

Очередной пересказ документации 😉

Indexers (C# Programming Guide)

C#​

Indexers - это механизм в C#, позволяющий работать с объектом класса или структурой как с массивом, обращаясь к его элементам по индексам. Например так: plantPoolInstance[elementIndex].

Проблема​

Подготовка данных для computer vision моделей иногда может занять очень много времени. Это проблема, так как замедляет процесс разработки, улучшения, адоптации моделей.

В этой статье описано почему реляционная схема для хранения свойств растений оказалась не такой уж и удобной и как ее можно улучшить.

В языках Java и C# присутствуют статические члены класса. Для инициализации статических полей нам доступен механизм, называемый "static constructors" в C# и "static block" в Java.

Чуть больше подробностей про внутренности PostgreSQL можно найти в других статьях.

Интерфейс - контракт (набор методов и констант), описывающий какие есть способы взаимодействовать с объектом, который реализует этот контракт. С другой стороны, тот кто заявляет о поддержке какого-либо контракта обязан реализовать все методы описанные в контракте.

Интерфейс - контракт (набор методов и констант), описывающий какие есть способы взаимодействовать с объектом, который реализует этот контракт. С другой стороны, тот кто заявляет о поддержке какого-либо контракта обязан реализовать все методы описанные в контракте.

Интерфейс в Java позволяет реализовать полиморвизм и множественное наследование.

Заметка о discards в C# - это скорре краткий пересказ документации с небольшими добавлениями.

C#​

Делегат - это способ передачи кода между разными частями программы. Лямбда функции призваны выполнять аналогичные функции 😉.

lambda expression is a preferred way to write inline code

Для организации областей видимости как методов и полей классов так и самих классов человечество придумало ключивые слова или модификаторы доступа.

Немного теории​

Паттерн Singleton гарантирует, что для класса в приложении будет создан только один экземпляр и везде будет использоваться только он.

Начнем с классов. Ну и с того, что в Java возможности подобной "Partial Classes and Methods" нет.

О чем это?​

Partial Classes and Methods - это возможность для разработчика разделить реализацию класс на два или более файла

Отталкнемся от директивы/оператора using в C# и посмотрим что там есть в Java.

Директива / Оператор using​

Импорт типов​

using позволяет использовать типы описанные в других пространствах имен без указания fully-qualified-name

Generics - обобщения, обобщенные типы и методы. Возможность создать код (класс или метод) без привязки к конкретным тыпам данных. Такая реализация имеет обобщенный параметр типа, который используется в реализации и мы должны определнить этот параметр конкретным типом в момент создания класса.

In this article, my idea is to illustrate how we can create objects or other structures inline, in-place, without additional classes, function calls, etc...

I would like to write some algorithms to train with new knowleges in C#.

Сложно найти менее увлекательную тему чем инструкции потока управления. В этой статье(заметке) я приведу только примеры кода с редкими комментариями если это будет иметь смысл.

Возможно, самая интересная часть этой статьи - это раздел про switch и pattern matching.

Я думаю что изучение C# стоит начать со знакомства с его системой типов и сравнить её с Java ;)

Для себя хочу иметь заметку про DDD в которой кратко будет все что нужно занать про DDD. "кратко" - это, скорее всего, не возможно в формате заметки или даже целой статьи... Но почему бы и не попробовать.

In this post I'm going to describe database schema which I will use in my pet project "Seed".

It is short note how we can use full-text search in PostgreSQL.

The goal for this post:

1. Quick overview for foreign-data wrapper in PostgreSQL
2. Example of using FDW (foreign-data wrapper) between different database inside the same PostgreSQL instance

docs

Hash​

Hash table by index key. Minimum bucket count = 2. Only hash value and version are stored in bucket, without key value.

docs

Table inheritance​

In PostgreSQL we can reduce number of code which required to describe db schema with "table inheritance".

PostgreSQL basics

Book to read: PostgreSQL 14 изнутри, Егор Рогов

A bit more details about transaction isolation in PostgreSQL database.

Here, I would like to describe basic concepts or elements that exist in PostgreSQL and are its main parts.

This is a rest application which accepts text and parse this text as plant name. Result will be returned as json structure with plant name parts.

Maybe not right this solution, but just only interesting idea to use this approach to increase quality of segmentation.

paper link

Simple REST binary storage service. Easy to deploy, easy to configure, easy to use.

I would like to have short summary here about these terms:

• Database – System which keep data to stack business tasks
• Warehouse – System which designed to provide data for analytics systems
• Data lake – Storage for all data. Everything will be stored here. for future generations 🙂

What I want to do?​

Get data from three rest services and show these data in one view. All domain data relates which each other.

I would like to design data layer for my project and I have a problem to use different datasources in one application.

For me it is interesting to compare Spring Boot and NestJS because they has similar core ideas based on Inversion of Control and Dependency Injection. Of course Spring Boot significantly more powerful, I understand it. Both frameworks provide ability for us to write short and expressive code. And it will be interesting to compare two implementations for one project.

NestJS development experience pretty similar to Angular experience and if we can use NestJS for simple backend services instead of Spring Boot – it means we can reduce complexity in development process for full stack developers.

The idea: I would like to have ability to write code like I do this in Java ;). I would like to have ability to create a code with abstract service and provide different implementation for different components.

Spring Batch to do batch processing. Let’s process something in batches.

Sometimes we need to remove file from git repository, completely remove from repository. For example it can be property file with passwords 🙂

In Angular framework we can specify “something” which called token and it is possible to use this thing in DI Provider. This ability can be used to configure some shared code with different parameters.

It is simple overview of Spring Integration component from Spring framework and it is impossible to cover all features in one article.

To illustrate how it works, I would like to build a simple demo application, link you can find below as usual.

Interesting concept in AWS. You can share your data in AWS S3 but not pay for storing this data. In AWS it’s called “Requester Pays Buckets”.

Git submodules is not simple approach to use to store your code. But this technic is pretty useful then you need to make changes in your project and in shared libraries, or if you would like to use shared libraries or other piece of code directly from your code without builded shared artefacts, libraries etc…

It’s a quick note about tools which I’m using for creation datasets.

The goal: I would like to have a tool or tools to create datasets for computer vision models.

“Extracting Scientific Figures with Distantly Supervised Neural Networks”

Interesting idea here – it is patching latex source to generate document layout dataset.

My first post in this blog. I have no ideas what i need to write here, but it is just first post 🙂