bogdanov_dmitry_lab_1 is ready

Reviewed-on: Alexey/DAS_2024_1#33

bazunov_andrew_lab_1/.gitignore

@@ -0,0 +1,2 @@
+ollama
+./ollama

bazunov_andrew_lab_1/README.md

@@ -0,0 +1,33 @@
+# Распределенные вычисления и приложения Л1
+## _Автор Базунов Андрей Игревич ПИбд-42_
+
+В качестве сервисов были выбраны:
+- 1.Ollama (_Сервис для использования LLMs моделей_)
+- 2.Open Web Ui (_Сервис для удобного общения с моделью из сервиса Ollama_)
+- 3.Gitea (_Гит сервис_)
+
+# Docker
+
+>Перед исполнением вполняем установку docker и проверяем версию
+
+```sh
+docker-compose --version
+```
+
+>Далее производим настройку файла docker-compose.yaml и запускаем контейнер
+
+```sh
+docker-compose up -d
+```
+
+>Для завершения работы контейнера используем команду
+```sh
+docker-compose down
+```
+---
+> Замечание: после запуска контейнера, необходимо перейти в контейнер **ollamа** и выполнить установку модели [gemma2](https://ollama.com/library/gemma2:2b)
+> ```sh
+> docker-compose exec ollama ollama run ollama run gemma2:2b
+> ```
+---
+Далее можно использовать веб сервис Open Web Ui по адресу **localhost:8080** для общения с моделью и Gitea по адресу **localhost:3000** - [демонстрация работы](https://vk.com/video/@viltskaa?z=video236673313_456239574%2Fpl_236673313_-2)

bazunov_andrew_lab_1/docker-compose.yml

@@ -0,0 +1,61 @@
+services:
+  gitea: # Имя сервиса
+    image: gitea/gitea:latest # Имя образа
+    container_name: gitea # Имя контейнера, может быть произовольным
+    ports:
+      - "3000:3000"  # Проброс порта Gitea на хост
+    volumes: # хранилище
+      - data:/data
+    environment: # переменные окружения
+      USER_UID: 1000
+      USER_GID: 1000
+
+  ollama:
+    image: ollama/ollama:latest
+    container_name: ollama
+    restart: always
+    ports:
+      - 7869:11434
+    pull_policy: always
+    tty: true
+    volumes:
+      - .:/code
+      - ./ollama/ollama:/root/.ollama  # Директория для данных Ollama
+    environment:
+      - OLLAMA_KEEP_ALIVE=24h
+      - OLLAMA_HOST=0.0.0.0  # Указываем хост для API Ollama
+    networks:
+      - ollama-docker
+    command: ["serve"]  # Запускаем Ollama в режиме сервера
+
+  ollama-webui:
+    image: ghcr.io/open-webui/open-webui:main  # Образ Open Web UI
+    container_name: ollama-webui
+    restart: unless-stopped
+    volumes:
+      - ./ollama/ollama-webui:/app/backend/data
+    ports:
+      - 8080:8080  # Порт для веб-интерфейса
+    environment: # https://docs.openwebui.com/getting-started/env-configuration#default_models
+      - OLLAMA_BASE_URLS=http://host.docker.internal:7869
+      - ENV=dev
+      - WEBUI_AUTH=False
+      - WEBUI_NAME=Viltskaa AI
+      - WEBUI_URL=http://localhost:8080
+      - WEBUI_SECRET_KEY=t0p-s3cr3t
+    depends_on:
+      - ollama
+    extra_hosts:
+      - host.docker.internal:host-gateway
+    networks:
+      - ollama-docker
+
+networks:
+  ollama-docker:
+    external: false
+
+volumes:
+  ollama:
+    driver: local
+  data:
+    driver: local

bogdanov_dmitry_lab_1/README.md

@@ -0,0 +1,35 @@
+# Лабораторная работа №1
+
+## Богданов Дмитрий ПИбд-42
+
+### Для выполнения были развернуты следующие сервисы:
+
+* PostgreSQL - база данных
+* Mediawiki - движок вики
+* Gitea - движок гита
+
+### С использованием следующих технологий:
+
+* git
+* docker
+* docker-compose
+
+
+### Запуск лабораторной:
+Необходимо перейти в папку с файлом docker-compose.yaml и ввести следующую команду:
+```
+docker-compose up -d
+```
+
+## Результат запуска:
+```
+[+] Running 4/4
+ ✔ Network bogdanov_dmitry_lab_1_default        Created                                                                                                                                                 0.0s 
+ ✔ Container bogdanov_dmitry_lab_1-mediawiki-1  Started                                                                                                                                                 0.7s 
+ ✔ Container bogdanov_dmitry_lab_1-git-1        Started                                                                                                                                                 0.8s 
+ ✔ Container bogdanov_dmitry_lab_1-db-1         Started                                                                                                                                                 0.7s 
+```
+
+## Видео с результатом запуска: 
+
+Видео можно посмотреть по данной [ссылке](https://drive.google.com/file/d/1TES58HIeCnnKbtwWgED2oig4N7plBmol/view).

bogdanov_dmitry_lab_1/docker-compose.yaml

@@ -0,0 +1,40 @@
+services:
+  # PostgreSQL
+  db:
+    # Образ контейнера
+    image: postgres
+    # Перезапуск при падении
+    restart: always
+    # Порт для подключения
+    ports:
+      - 5432:5432
+    # Каталог с данными. Каталог компьютера:каталог контейнера
+    volumes:
+      - ./volumes/postgres:/var/lib/postgresql/data
+    # Переменные среды для определения хотя бы одного пользователя при запуске
+    environment:
+      - POSTGRES_USER=admin
+      - POSTGRES_PASSWORD=admin
+  # Mediawiki
+  mediawiki:
+    # Образ 
+    image: mediawiki
+    # Перезапуск при падении
+    restart: always
+    # Порт для подключения
+    ports:
+      - 8080:80
+    # Каталоги
+    volumes:
+      - ./volumes/mediawiki:/var/www/html/images
+  # Gitea
+  git:
+    image: gitea/gitea:latest
+    restart: always
+    ports:
+      - "3000:3000"
+      - "222:22"
+    volumes:
+      - ./volumes/gitea:/data
+      - ./volumes/timezone:/etc/timezone:ro
+      - ./volumes/localtime:/etc/localtime:ro

tsukanova_irina_lab_2/.gitignore

@@ -1,2 +1,2 @@
 /.venv
-/.idea
+/.idea

tsukanova_irina_lab_2/README.md

@@ -0,0 +1,16 @@
+# Цуканова Ирина ПИбд-32
+# Лабораторная работа №2 - Разработка простейшего распределённого приложения  
+
+### Язык разработки приложений: Python
+
+## Выбранные варианты
+- Для программы 1: Ищет в каталоге ```/var/data``` самый большой по объёму файл и перекладывает его в ```/var/result/data.txt```. 
+- Для программы 2: Сохраняет произведение первого и последнего числа из файла ```/var/result/data.txt``` в ```/var/result/result.txt```.
+
+## Описание:
+Каждая программа лежит в своей папке, первая в worker-1, вторая в worker-2.
+В этих же папках лежат Dockerfile'ы с инструкциями по сборке. В них присутствуют комментарии для значимых строк.  
+Монтированные папки ```data``` для ```/var/data``` и ```result``` для ```/var/result```.
+
+
+## [Видео](https://drive.google.com/file/d/1eBbIDgTo3MF4EeM677EPEKgJEINekaC0/view?usp=drive_link)

tsukanova_irina_lab_2/data/file_1.txt

@@ -0,0 +1 @@
+34 905 63 92 74 9 3 25 8 0 2 4 24 452 94 6 2 4 2 65 83 73 672 47 23 21 1

tsukanova_irina_lab_2/data/file_2.txt

@@ -0,0 +1 @@
+4 9 6 320 75 348 12 75 94 63 45 23 3

tsukanova_irina_lab_2/data/file_3.txt

@@ -0,0 +1 @@
+5 34 7 9 6 43 5 768 4 23 1 3  657 534 4 3 87 6 9 8 56 37 525 5 7 3 2 65 4 86 7 295 473 254 633 4 45 2

tsukanova_irina_lab_2/docker-compose.yaml

@@ -0,0 +1,18 @@
+services:
+
+  worker_one:
+    container_name: worker_one
+    build:
+      dockerfile: ./worker-1
+    volumes:
+      - ./data:/var/data
+      - ./result:/var/result
+
+  worker_two:
+    container_name: worker_two
+    build:
+      dockerfile: ./worker-2
+    volumes:
+      - ./result:/var/result
+    depends_on:
+      - worker_one

tsukanova_irina_lab_2/result/data.txt

@@ -0,0 +1 @@
+5 34 7 9 6 43 5 768 4 23 1 3  657 534 4 3 87 6 9 8 56 37 525 5 7 3 2 65 4 86 7 295 473 254 633 4 45 2

tsukanova_irina_lab_2/result/result.txt

@@ -0,0 +1 @@
+10

tsukanova_irina_lab_2/worker-1/Dockerfile

@@ -4,14 +4,8 @@ FROM python:3.12-slim
 # Устанавливаю рабочую директорию внутри контейнера
 WORKDIR /app
 
-# Копирую файл requirements.txt в контейнер
-COPY requirements.txt .
-
-# Устанавливаю зависимости
-RUN pip install --no-cache-dir -r requirements.txt
-
 # Копирую все файлы в контейнер
-COPY book_service/book_service.py .
+COPY worker_1.py .
 
 # Команда для запуска Python-скрипта
-CMD ["python", "book_service.py"]
+CMD ["python", "worker_1.py"]

tsukanova_irina_lab_2/worker-1/worker_1.py

@@ -0,0 +1,27 @@
+import os
+import shutil
+
+# Ищет в каталоге /var/data самый большой по объёму файл и перекладывает его в /var/result/data.txt.
+print("start worker_1")
+dir_data = "/var/data"
+dir_res = "/var/result"
+
+if not os.path.exists(dir_data):
+    os.mkdir(dir_data)
+
+if not os.path.exists(dir_res):
+    os.mkdir(dir_res)
+
+largest_file = None
+largest_size = 0
+
+for root, dirs, files in os.walk(dir_data):
+    for file in files:
+        file_path = os.path.join(root, file)
+        file_size = os.path.getsize(file_path)
+        if file_size > largest_size:
+            largest_size = file_size
+            largest_file = file_path
+
+if largest_file:
+    shutil.copyfile(largest_file, dir_res + "/data.txt")

tsukanova_irina_lab_2/worker-2/Dockerfile

@@ -4,14 +4,8 @@ FROM python:3.12-slim
 # Устанавливаю рабочую директорию внутри контейнера
 WORKDIR /app
 
-# Копирую файл requirements.txt в контейнер
-COPY requirements.txt .
-
-# Устанавливаю зависимости
-RUN pip install --no-cache-dir -r requirements.txt
-
 # Копирую все файлы в контейнер
-COPY author_service/author_service.py .
+COPY worker_2.py .
 
 # Команда для запуска Python-скрипта
-CMD ["python", "author_service.py"]
+CMD ["python", "worker_2.py"]

tsukanova_irina_lab_2/worker-2/worker_2.py

@@ -0,0 +1,19 @@
+# Сохраняет произведение первого и последнего числа из файла /var/result/data.txt в /var/result/result.txt.
+
+print("start worker_2")
+
+with open('/var/result/data.txt', 'r') as f:
+    numbers = [int(num) for num in f.read().split() if num.isdigit()]
+
+if numbers:
+    first_number = numbers[0]
+    last_number = numbers[-1]
+
+    result = first_number * last_number
+
+    with open('/var/result/result.txt', 'w') as f:
+        f.write(f"{result}\n")
+
+    print(f"Получен результат - {result}")
+else:
+    print("Результат не получен. Файл не содержит чисел")

tsukanova_irina_lab_3/README.md

@@ -1,27 +0,0 @@
-# Цуканова Ирина ПИбд-32
-# Лабораторная работа №3 - REST API, Gateway и синхронный обмен между микросервисами 
-
-### Язык разработки приложений: Python
-
-## Выбранные сущности:
-
-- Автор. Содержит Uuid, Name, Surname 
-- Книга. Содержит Uuid, Title, Year, Author_id
-
-
-## Описание:
-Для каждой сущности были реализованы стандартные CRUD-операции: получение всех записей, получение конкретной записи,
-создание записи, изменение записи, удаление записи.  
-
-Дополнительно для сущности Автор прописаны:
-1. Получение автора со списком его книг(с полной информацией). При этом сервис взаимодействует с другим сервисом,
-чтобы получить список книг по идентификатору автора.
-2. Операция проверка наличия автора по идентификатору. Это нужно для сервиса книг.
-
-Дополнительно для сущности Книга прописаны:
-1. Получение списка записей с полной информацией об авторе (не только идентификатор).
-2. Получение списка записей по идентификатору автора. Это нужно для сервиса авторов.
-3. Получение конкретной записи с полной информацией об авторе.
-
-
-## [Видео](https://drive.google.com/file/d/10qXA-jS9QIX5DnYjSAHlEhLx0OyKEk0W/view?usp=sharing)

tsukanova_irina_lab_3/author_service/author_service.py

@@ -1,128 +0,0 @@
-from flask import Flask, jsonify, request
-from uuid import uuid4
-import uuid
-import requests
-
-
-class Author:
-    def __init__(self, name, surname, uuid_: uuid):
-        if uuid_ is None:
-            self.uuid_: uuid = uuid4()
-        else:
-            self.uuid_: uuid = uuid.UUID(uuid_)
-        self.name: str = name
-        self.surname: str = surname
-
-    def to_dict(self):
-        return {
-            "uuid": self.uuid_,
-            "name": self.name,
-            "surname": self.surname
-        }
-
-    def to_dict_with_books(self, books: list):
-        return {
-            "uuid": self.uuid_,
-            "name": self.name,
-            "surname": self.surname,
-            "books": books
-        }
-
-
-app = Flask(__name__)
-
-authors: list[Author] = [
-    Author(name='Leon', surname='Kane', uuid_='997aa4c5-ebb2-4794-ba81-e742f9f1fa30'),
-    Author(name='James', surname='Rasal', uuid_='694827e4-0f93-45a5-8f75-bad7ef2d21fe'),
-    Author(name='Tess', surname='Root', uuid_='eb815350-c7b9-4446-8434-4c0640c21995')
-]
-
-books_url = 'http://book_service:20002/'
-
-
-def list_jsonify():
-    return jsonify([author.to_dict() for author in authors])
-
-
-# получение списка всех авторов
-@app.route('/', methods=['GET'])
-def get_all():
-    return list_jsonify(), 200
-
-
-# получение автора по идентификатору
-@app.route('/<uuid:uuid_>', methods=['GET'])
-def get_one(uuid_):
-    for author in authors:
-        if author.uuid_ == uuid_:
-            return author.to_dict(), 200
-
-    return 'Автор с таким uuid не был найден', 404
-
-
-# получение автора со списком его книг
-@app.route('/with-books/<uuid:uuid_>', methods=['GET'])
-def get_one_with_books(uuid_):
-    for author in authors:
-        if author.uuid_ == uuid_:
-            response = requests.get(books_url + f'by-author/{uuid_}')
-            print(response.json())
-            return author.to_dict_with_books(response.json()), 200
-
-    return 'Автор с таким uuid не был найден', 404
-
-
-# проверка наличия автора по его идентификатору (для book_service)
-@app.route('/check/<uuid:uuid_>', methods=['GET'])
-def check_exist(uuid_):
-    for author in authors:
-        if author.uuid_ == uuid_:
-            return '', 200
-    return '', 404
-
-
-# создание автора
-@app.route('/', methods=['POST'])
-def create():
-    data = request.json
-    name = data.get('name', None)
-    surname = data.get('surname', None)
-    if name is None or surname is None:
-        return 'Недостаточно полей для создания нового автора', 404
-
-    new_author = Author(name, surname, None)
-    authors.append(new_author)
-    return get_one(new_author.uuid_)
-
-
-# изменение автора по идентификатору
-@app.route('/<uuid:uuid_>', methods=['PUT'])
-def update_by_id(uuid_):
-    data = request.json
-    new_name = data.get('name', None)
-    new_surname = data.get('surname', None)
-
-    for author in authors:
-        if author.uuid_ == uuid_:
-            if new_name is not None:
-                author.name = new_name
-            if new_surname is not None:
-                author.surname = new_surname
-            return get_one(author.uuid_)
-
-    return 'Автор с таким uuid не был найден', 404
-
-
-# удаление автора по идентификатору
-@app.route('/<uuid:uuid_>', methods=['DELETE'])
-def delete(uuid_):
-    for author in authors:
-        if author.uuid_ == uuid_:
-            authors.remove(author)
-            return 'Автор успешно удален', 200
-
-    return 'Автор с таким uuid не был найден', 404
-
-
-if __name__ == '__main__':
-    app.run(host='0.0.0.0', port=20001, debug=True)

tsukanova_irina_lab_3/book_service/book_service.py

@@ -1,163 +0,0 @@
-from flask import Flask, jsonify, request
-import requests
-from uuid import uuid4
-import uuid
-
-
-class Book:
-    def __init__(self, title, year, uuid_: uuid, author_id: uuid):
-        if uuid_ is None:
-            self.uuid_: uuid = uuid4()
-        else:
-            self.uuid_: uuid = uuid.UUID(uuid_)
-        self.title: str = title
-        self.year: int = year
-        self.author_id: uuid = uuid.UUID(author_id)
-
-    def to_dict(self):
-        return {
-            'title': self.title,
-            'year': self.year,
-            'author_id': self.author_id,
-            'uuid': self.uuid_
-        }
-
-    def to_dict_for_authors(self):
-        return {
-            'title': self.title,
-            'year': self.year,
-            'uuid': self.uuid_
-        }
-
-    def to_dict_with_info(self, author: dict):
-        return {
-            'title': self.title,
-            'year': self.year,
-            'author_id': self.author_id,
-            'author_info': author,
-            'uuid': self.uuid_
-        }
-
-
-app = Flask(__name__)
-
-books: list[Book] = [
-    Book(title='Garden', year=1977, uuid_='89fa1e7a-7e88-445e-a4d8-6d4497ea8f19',
-         author_id='997aa4c5-ebb2-4794-ba81-e742f9f1fa30'),
-    Book(title='New York', year=1989, uuid_='0351ee11-f11b-4d83-b2c8-1075b0c357dc',
-         author_id='694827e4-0f93-45a5-8f75-bad7ef2d21fe'),
-    Book(title='The story of flowers', uuid_='dfc17619-7690-47aa-ae8e-6a5068f8ddec', year=1977,
-         author_id='eb815350-c7b9-4446-8434-4c0640c21995'),
-    Book(title='Little Rock', year=1990, uuid_='3fad0e6b-cefc-40dd-99c0-adc5ec0290d2',
-         author_id='694827e4-0f93-45a5-8f75-bad7ef2d21fe'),
-    Book(title='One Piece', year=1994, uuid_='cf0cf26e-c1c6-43ea-bf59-1f8edb180e41',
-         author_id='694827e4-0f93-45a5-8f75-bad7ef2d21fe'),
-    Book(title='Black clover', year=1940, uuid_='2ac3c734-21ad-4450-884d-7de1f5452b9d',
-         author_id='eb815350-c7b9-4446-8434-4c0640c21995'),
-]
-
-authors_url = 'http://author_service:20001/'
-
-
-def list_jsonify():
-    return jsonify([book.to_dict() for book in books])
-
-
-# получить список книг без подробной инфы об авторе
-@app.route('/', methods=['GET'])
-def get_all():
-    return list_jsonify(), 200
-
-
-# получение всех книг с информацией об авторе
-@app.route('/full', methods=['GET'])
-def get_all_full():
-    authors: list[dict] = requests.get(authors_url).json()
-    response = []
-    for book in books:
-        for author in authors:
-            if book.author_id == uuid.UUID(author.get('uuid')):
-                response.append(book.to_dict_with_info(author))
-
-    return response, 200
-
-
-# получение списка книг по идентификатору автора (для author_service)
-@app.route('/by-author/<uuid:author_uuid>', methods=['GET'])
-def get_by_author_id(author_uuid):
-    return [book.to_dict_for_authors() for book in books if book.author_id == author_uuid], 200
-
-
-# получение книги по идентификатору
-@app.route('/<uuid:uuid_>', methods=['GET'])
-def get_one(uuid_):
-    for book in books:
-        if book.uuid_ == uuid_:
-            return book.to_dict(), 200
-
-    return 'Книга с таким uuid не была найдена', 404
-
-
-# получение книги по идентификатору с инфой об авторе
-@app.route('/full/<uuid:uuid_>', methods=['GET'])
-def get_one_full(uuid_):
-    for book in books:
-        if book.uuid_ == uuid_:
-            response = requests.get(authors_url + str(book.author_id))
-            return book.to_dict_with_info(response.json()), 200
-
-    return 'Книга с таким uuid не была найдена', 404
-
-
-# создание новой книги
-@app.route('/', methods=['POST'])
-def create():
-    data = request.json
-    title = data.get('title', None)
-    year = data.get('year', None)
-    author_id = data.get('author_id', None)
-    checking = requests.get(authors_url + f'/check/{author_id}')
-    print(checking)
-    if checking.status_code == 200:
-        new_book = Book(title, year, None, author_id)
-        books.append(new_book)
-        return get_one(new_book.uuid_)
-    if checking.status_code == 404:
-        return 'Автор с таким uuid не существует', 404
-
-    return 'Неизвестная ошибка', 500
-
-
-# изменение книги по идентификатору
-@app.route('/<uuid:uuid_>', methods=['PUT'])
-def update_by_id(uuid_):
-    data = request.json
-    new_title = data.get('title', None)
-    new_year = data.get('year', None)
-
-    for book in books:
-        print(book.uuid_)
-
-        if book.uuid_ == uuid_:
-            if new_title is not None:
-                book.title = new_title
-            if new_year is not None:
-                book.year = new_year
-            return get_one(book.uuid_)
-
-    return 'Книга с таким uuid не была найдена', 404
-
-
-# удаление книги по идентификатору
-@app.route('/<uuid:uuid_>', methods=['DELETE'])
-def delete(uuid_):
-    for book in books:
-        if book.uuid_ == uuid_:
-            books.remove(book)
-            return 'Книга успешно удалена', 200
-
-    return 'Книга с таким uuid не была найдена', 404
-
-
-if __name__ == '__main__':
-    app.run(host='0.0.0.0', port=20002, debug=True)

tsukanova_irina_lab_3/docker-compose.yaml

@@ -1,27 +0,0 @@
-services:
-
-  author_service:
-    container_name: author_service
-    build:
-      context: .
-      dockerfile: ./author_service/Dockerfile
-    expose:
-      - 20001
-
-  book_service:
-    container_name: book_service
-    build:
-      context: .
-      dockerfile: ./book_service/Dockerfile
-    expose:
-      - 20002
-
-  nginx:
-    image: nginx:latest
-    ports:
-      - "80:80"
-    volumes:
-      - ./nginx.conf:/etc/nginx/nginx.conf
-    depends_on:
-      - author_service
-      - book_service

tsukanova_irina_lab_3/nginx.conf

@@ -1,26 +0,0 @@
-
-events { worker_connections 1024; }
-
-http {
-    server {
-        listen      80;
-        listen      [::]:80;
-        server_name localhost;
-
-        location /author_service/ {
-            proxy_pass http://author_service:20001/;
-            proxy_set_header Host $host;
-            proxy_set_header X-Real-IP $remote_addr;
-            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
-            proxy_set_header X-Forwarded-Proto $scheme;
-        }
-
-        location /book_service/ {
-            proxy_pass http://book_service:20002/;
-            proxy_set_header Host $host;
-            proxy_set_header X-Real-IP $remote_addr;
-            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
-            proxy_set_header X-Forwarded-Proto $scheme;
-        }
-    }
-}