forked from Alexey/DAS_2024_1
morozov_vladimir_lab_2 is ready
This commit is contained in:
parent
3b9698ac38
commit
cb141cc4e7
1
morozov_vladimir_lab_2/.gitignore
vendored
Normal file
1
morozov_vladimir_lab_2/.gitignore
vendored
Normal file
@ -0,0 +1 @@
|
||||
.idea
|
23
morozov_vladimir_lab_2/docker-compose.yml
Normal file
23
morozov_vladimir_lab_2/docker-compose.yml
Normal file
@ -0,0 +1,23 @@
|
||||
version: '3'
|
||||
# Объявляем сервисы
|
||||
services:
|
||||
|
||||
worker_0: # сервис приложения для генерации данных
|
||||
build: ./worker_0/ # путь к его докер файлу
|
||||
volumes: # монтируем том
|
||||
- data:/usr/src/myData
|
||||
worker_1: # сервис 1го приложения
|
||||
build: ./worker_1/ # путь к его докер файлу
|
||||
volumes: # монтируем том
|
||||
- data:/usr/src/myData
|
||||
depends_on: # объявляем, что данный сервис запуститься только после запуска сервиса worker_0
|
||||
worker_0:
|
||||
condition: service_completed_successfully
|
||||
worker_2: # сервис 2го приложения
|
||||
build: ./worker_2/ # путь к его докер файлу
|
||||
volumes: # монтируем том
|
||||
- data:/usr/src/myData
|
||||
depends_on:
|
||||
- worker_1 # объявляем, что данный сервис запуститься только после запуска сервиса worker_1
|
||||
volumes: # объявляем тома
|
||||
data:
|
45
morozov_vladimir_lab_2/readme.md
Normal file
45
morozov_vladimir_lab_2/readme.md
Normal file
@ -0,0 +1,45 @@
|
||||
# Лабораторная работа №2 - разработка простейшего распределенного приложения
|
||||
|
||||
## Разработанные приложения
|
||||
- worker_0 - программа, которая создаст папки /var/data и сгенерирует в них изначальные данные
|
||||
- worker_1 - 1я программа. Вариант 4: Формирует файл /var/result/data.txt так, что каждая строка файла - количество символов в именах файлов из каталога /var/data
|
||||
- worker_2 - 2я программа. Вариант 2: Ищет наименьшее число из файла /var/data/data.txt и сохраняет его третью степень в /var/result/result.txt
|
||||
|
||||
Все программы были разработаны на языке Python.
|
||||
|
||||
## DockerFile
|
||||
Для каждого приложения был создан отдельный dockerfile, который позволяет нам создавать свои образы, на основе которых будут созданы контейнеры. Все файлы лежат в папках программ, описание имеет только dockerfile для `worker_0`, так как по структуре все они одинаковы
|
||||
|
||||
## DockerCompose
|
||||
Для того, чтобы запустить все программы нам нужно создать `docker-compose.yml`, в котором определим как запускать наши сервисы. В отличие от 1й л/р в `docker-compose.yml` были добавлены команды `build`, которая позволяет нам указать путь до dockerfile нашего приложения, а также `depends_on`, которая позволяет установить порядок запусков сервисов. Более подробное описание `docker-compose.yml` находится в нем самом в качестве комментариев
|
||||
|
||||
## Как запустить
|
||||
Для того, чтобы запустить наше распределенное приложение нужно выполнить несколько шагов
|
||||
1) Запустить докер приложение. Я использую doker desktop.
|
||||
2) Открыть терминал
|
||||
3) перейти в папку, в которой лежит `docker-compose.yml`. Сделать это можно с помощью команды `cd`
|
||||
3) Запустить команду:
|
||||
```
|
||||
docker-compose up --build
|
||||
```
|
||||
После этого будут созданые контейнеры, которые построены на основе образов, указанных в `docker-compose.yml`. В терминале будут отабражено следующее:
|
||||
```[+] Running 5/5
|
||||
✔ Network morozov_vladimir_lab_2_default Created
|
||||
✔ Volume "morozov_vladimir_lab_2_data" Created
|
||||
✔ Container morozov_vladimir_lab_2-worker_0-1 Created
|
||||
✔ Container morozov_vladimir_lab_2-worker_1-1 Created
|
||||
✔ Container morozov_vladimir_lab_2-worker_2-1 Created
|
||||
Attaching to worker_0-1, worker_1-1, worker_2-1
|
||||
worker_0-1 | Start generating data
|
||||
worker_0-1 | Create dir and files
|
||||
worker_0-1 exited with code 0
|
||||
worker_1-1 | Start first app
|
||||
worker_1-1 | Create dir
|
||||
worker_1-1 exited with code 0
|
||||
worker_2-1 | Start second app
|
||||
worker_2-1 | 0
|
||||
worker_2-1 exited with code 0
|
||||
```
|
||||
|
||||
## Запись тестирования
|
||||
Работа приложения представлена в [видео](https://disk.yandex.ru/i/0KAySyP5eaBg0g)
|
55
morozov_vladimir_lab_2/worker_0/app.py
Normal file
55
morozov_vladimir_lab_2/worker_0/app.py
Normal file
@ -0,0 +1,55 @@
|
||||
import os.path
|
||||
import random
|
||||
import sys
|
||||
# программа для создания первоначальных данных
|
||||
|
||||
# кол-во создаваемых файлов
|
||||
count_files = 10
|
||||
# буквы для создани случайных названий файлов
|
||||
letters = "a b c d e f g h i j k l m n o p q r s t u v w x y z"
|
||||
|
||||
# создание папки /var/data
|
||||
def create_dir(path):
|
||||
os.makedirs(f"{path}/var/data")
|
||||
|
||||
# заполнение файлов случайным кол-вом строк, состоящих из случайных чисел
|
||||
def create_strings(file):
|
||||
count_strings = random.randint(5,10)
|
||||
for i in range(0, count_strings):
|
||||
for _ in range(0,10):
|
||||
file.write(f"{random.randint(0, 100)} ")
|
||||
if i != count_strings-1:
|
||||
file.write('\n')
|
||||
|
||||
|
||||
# Создание файлов с данными
|
||||
def create_files(path):
|
||||
arr = letters.split()
|
||||
with open(f"{path}/var/data/data.txt", 'w') as f:
|
||||
create_strings(f)
|
||||
for i in range(1, count_files):
|
||||
name = ""
|
||||
for _ in range(0, random.randint(3, 10)):
|
||||
name += arr[random.randint(0, len(arr)-1)]
|
||||
with open(f"{path}/var/data/{name}{i}.txt",'w') as f:
|
||||
create_strings(f)
|
||||
|
||||
# проверка на наличие папок и файлов
|
||||
def check_dir(path):
|
||||
if os.path.exists(f"{path}/var/data"):
|
||||
if os.path.isfile(f"{path}/var/data/data.txt") and len(os.listdir(f"{path}/var/data")) >= count_files:
|
||||
print("Already create")
|
||||
else:
|
||||
print("Create files")
|
||||
create_files(path)
|
||||
else:
|
||||
print("Create dir and files")
|
||||
create_dir(path)
|
||||
create_files(path)
|
||||
|
||||
|
||||
if __name__ == '__main__' :
|
||||
print("Start generating data")
|
||||
path = sys.argv[1]
|
||||
check_dir(path)
|
||||
|
8
morozov_vladimir_lab_2/worker_0/dockerfile
Normal file
8
morozov_vladimir_lab_2/worker_0/dockerfile
Normal file
@ -0,0 +1,8 @@
|
||||
# объявляем базовый образ, на основе которого будет все построено
|
||||
FROM "python:3.9-slim"
|
||||
# назначаем основную рабочую директорию
|
||||
WORKDIR /usr/src/app
|
||||
# копируем содержимое текущей папке (скрипт питона) в контейнер, в основную рабочую папку
|
||||
COPY . .
|
||||
# при запуске образа выполняем команду запуска приложения
|
||||
CMD [ "python", "./app.py", "/usr/src/myData"]
|
30
morozov_vladimir_lab_2/worker_1/app.py
Normal file
30
morozov_vladimir_lab_2/worker_1/app.py
Normal file
@ -0,0 +1,30 @@
|
||||
import os
|
||||
import sys
|
||||
# 1я программа.
|
||||
# Вариант 4: Формирует файл /var/result/data.txt так,
|
||||
# что каждая строка файла - количество символов в именах файлов из каталога /var/data
|
||||
|
||||
# Создание папки
|
||||
def create_dir(path):
|
||||
os.makedirs(f"{path}/var/result")
|
||||
|
||||
# Создание файла result и заполнение его
|
||||
def create_file(path):
|
||||
with open(f"{path}/var/result/data.txt", 'w') as f:
|
||||
files = os.listdir(f"{path}/var/data")
|
||||
for i, file in enumerate(files):
|
||||
f.write(f"{file} - {len(file.replace('.txt', ''))}")
|
||||
if i != len(files)-1:
|
||||
f.write('\n')
|
||||
|
||||
# Проверка на наличие файла result
|
||||
def check(path):
|
||||
if not os.path.exists(f"{path}/var/result"):
|
||||
print("Create dir")
|
||||
create_dir(path)
|
||||
create_file(path)
|
||||
|
||||
if __name__ == '__main__' :
|
||||
print("Start first app")
|
||||
path = sys.argv[1]
|
||||
check(path)
|
4
morozov_vladimir_lab_2/worker_1/dockerfile
Normal file
4
morozov_vladimir_lab_2/worker_1/dockerfile
Normal file
@ -0,0 +1,4 @@
|
||||
FROM "python:3.9-slim"
|
||||
WORKDIR /usr/src/app
|
||||
COPY . .
|
||||
CMD [ "python", "./app.py", "/usr/src/myData"]
|
27
morozov_vladimir_lab_2/worker_2/app.py
Normal file
27
morozov_vladimir_lab_2/worker_2/app.py
Normal file
@ -0,0 +1,27 @@
|
||||
import sys
|
||||
# 2я Программа
|
||||
# Вариант 2: Ищет наименьшее число из файла /var/data/data.txt
|
||||
# и сохраняет его третью степень в /var/result/result.txt
|
||||
|
||||
|
||||
# Основной метод, в котором открываем файл data.txt, ищем в нем наименьшее число и записываем его степень в result
|
||||
def work(path):
|
||||
result = 0
|
||||
with open(f"{path}/var/data/data.txt", 'r') as f:
|
||||
strings = f.readlines()
|
||||
min = int(strings[0].replace('\n','').split()[0])
|
||||
for string in strings:
|
||||
arr = string.replace('\n','').split()
|
||||
for num in arr:
|
||||
if int(num) <= min:
|
||||
min = int(num)
|
||||
result = int(min)**3
|
||||
with open(f"{path}/var/result/result.txt", 'w') as f:
|
||||
f.write(f"{result}")
|
||||
print(result)
|
||||
|
||||
|
||||
if __name__ == '__main__' :
|
||||
print("Start second app")
|
||||
path = sys.argv[1]
|
||||
work(path)
|
4
morozov_vladimir_lab_2/worker_2/dockerfile
Normal file
4
morozov_vladimir_lab_2/worker_2/dockerfile
Normal file
@ -0,0 +1,4 @@
|
||||
FROM "python:3.9-slim"
|
||||
WORKDIR /usr/src/app
|
||||
COPY . .
|
||||
CMD [ "python", "./app.py", "/usr/src/myData"]
|
Loading…
Reference in New Issue
Block a user