forked from Alexey/DAS_2024_1
Merge pull request 'kadyrov_aydar_lab_2' (#104) from kadyrov_aydar_lab_2 into main
Reviewed-on: Alexey/DAS_2024_1#104
This commit is contained in:
commit
2834efbbce
10
kadyrov_aydar_lab_2/.gitignore
vendored
Normal file
10
kadyrov_aydar_lab_2/.gitignore
vendored
Normal file
@ -0,0 +1,10 @@
|
||||
data/
|
||||
result/
|
||||
__pycache__/
|
||||
*.py[cod]
|
||||
*.env
|
||||
*.venv
|
||||
.env.local
|
||||
venv/
|
||||
env/
|
||||
.idea/
|
78
kadyrov_aydar_lab_2/README.md
Normal file
78
kadyrov_aydar_lab_2/README.md
Normal file
@ -0,0 +1,78 @@
|
||||
# Лабораторная работа №2 - Разработка простейшего распределённого приложения
|
||||
|
||||
## Задание
|
||||
|
||||
**Цель**: Разработать два приложения, результат работы первого из которых становится входными данными для второго.
|
||||
|
||||
**Задачи**:
|
||||
1. Разработать два приложения:
|
||||
- **app_one**: Ищет в каталоге /var/data файл с наибольшим количеством строк и копирует его содержимое в /var/result/data.txt.
|
||||
- **app_two**: Ищет наименьшее число из файла /var/result/data.txt и сохраняет его в третьей степени в /var/result/result.txt.
|
||||
2. Разработать файлы сборки Docker для каждого приложения.
|
||||
3. Собрать файл docker-compose.yml для запуска обоих приложений.
|
||||
4. Настроить монтирование директорий для обмена данными между контейнерами.
|
||||
5. Правильно закоммитить решение с использованием .gitignore для исключения лишних файлов.
|
||||
|
||||
## Варианты задания:
|
||||
|
||||
1. **app_one**:
|
||||
- Ищет файл с наибольшим количеством строк в каталоге /var/data.
|
||||
- Копирует содержимое этого файла в /var/result/data.txt.
|
||||
|
||||
2. **app_two**:
|
||||
- Читает файл /var/result/data.txt.
|
||||
- Ищет наименьшее число и сохраняет его третью степень в /var/result/result.txt.
|
||||
|
||||
### Требования:
|
||||
1. **Docker**: Платформа для контейнеризации приложений.
|
||||
2. **Docker Compose**: Инструмент для управления многоконтейнерными приложениями на основе файла docker-compose.yml.
|
||||
|
||||
### Сборка и запуск:
|
||||
|
||||
В директории, где находится файл docker-compose.yml, выполним команду для сборки и запуска всех контейнеров:
|
||||
|
||||
|
||||
docker-compose up --build
|
||||
|
||||
|
||||
Эта команда:
|
||||
1. Собирает все Docker-образы для сервисов.
|
||||
2. Запускает контейнеры.
|
||||
3. Автоматически подготавливает данные и выполняет приложения последовательно.
|
||||
|
||||
### Результаты:
|
||||
|
||||
После успешного завершения работы контейнеров можно проверить результаты в папке result:
|
||||
- **data.txt** — файл, полученный после выполнения первого приложения (содержит копию файла с наибольшим количеством строк из папки data).
|
||||
- **result.txt** — файл, полученный после выполнения второго приложения (содержит третью степень наименьшего числа из файла data.txt).
|
||||
|
||||
## Описание работы
|
||||
|
||||
### Программы:
|
||||
|
||||
1. **app_one/main.py**:
|
||||
- Ищет файл с наибольшим количеством строк в каталоге /var/data.
|
||||
- Копирует содержимое этого файла в /var/result/data.txt.
|
||||
|
||||
2. **app_two/main.py**:
|
||||
- Читает файл /var/result/data.txt.
|
||||
- Ищет наименьшее число в файле и возводит его в третью степень.
|
||||
- Сохраняет результат в файл /var/result/result.txt.
|
||||
|
||||
### Генерация данных:
|
||||
|
||||
Для создания случайных данных был написан скрипт generate_data.py:
|
||||
- Создает несколько файлов с целыми числами в каталоге /var/data.
|
||||
- Каждый файл содержит случайные числа, которые будут использоваться первым приложением.
|
||||
|
||||
### Dockerfile:
|
||||
|
||||
Каждое приложение имеет собственный Dockerfile, где указаны шаги для сборки Python-образов и запуска программ.
|
||||
|
||||
## Вывод
|
||||
|
||||
В результате лабораторной работы было создано простейшее распределенное приложение, которое использует Docker и Docker Compose для запуска двух программ, обрабатывающих данные в контейнерах.
|
||||
|
||||
## Видео ВК
|
||||
|
||||
https://vk.com/video64471408_456239205?list=ln-nzLhpgninZdZBOzarw
|
7
kadyrov_aydar_lab_2/app_one/Dockerfile
Normal file
7
kadyrov_aydar_lab_2/app_one/Dockerfile
Normal file
@ -0,0 +1,7 @@
|
||||
FROM python:3.9-slim
|
||||
|
||||
WORKDIR /app
|
||||
|
||||
COPY . /app
|
||||
|
||||
CMD ["python", "main.py"]
|
38
kadyrov_aydar_lab_2/app_one/main.py
Normal file
38
kadyrov_aydar_lab_2/app_one/main.py
Normal file
@ -0,0 +1,38 @@
|
||||
import os
|
||||
|
||||
def get_file_with_most_lines(directory):
|
||||
max_lines = 0
|
||||
target_file = ""
|
||||
|
||||
for filename in os.listdir(directory):
|
||||
filepath = os.path.join(directory, filename)
|
||||
if os.path.isfile(filepath):
|
||||
with open(filepath, 'r') as f:
|
||||
line_count = sum(1 for _ in f)
|
||||
if line_count > max_lines:
|
||||
max_lines = line_count
|
||||
target_file = filename
|
||||
|
||||
return target_file
|
||||
|
||||
def copy_file(src_directory, dest_directory, filename):
|
||||
src_filepath = os.path.join(src_directory, filename)
|
||||
dest_filepath = os.path.join(dest_directory, 'data.txt')
|
||||
|
||||
os.makedirs(dest_directory, exist_ok=True)
|
||||
|
||||
with open(src_filepath, 'r') as src_file:
|
||||
with open(dest_filepath, 'w') as dest_file:
|
||||
dest_file.write(src_file.read())
|
||||
|
||||
def main():
|
||||
src_directory = '/var/data'
|
||||
dest_directory = '/var/result'
|
||||
|
||||
target_file = get_file_with_most_lines(src_directory)
|
||||
if target_file:
|
||||
copy_file(src_directory, dest_directory, target_file)
|
||||
print(f"File {target_file} copied to {dest_directory}/data.txt")
|
||||
|
||||
if __name__ == "__main__":
|
||||
main()
|
7
kadyrov_aydar_lab_2/app_two/Dockerfile
Normal file
7
kadyrov_aydar_lab_2/app_two/Dockerfile
Normal file
@ -0,0 +1,7 @@
|
||||
FROM python:3.9-slim
|
||||
|
||||
WORKDIR /app
|
||||
|
||||
COPY . /app
|
||||
|
||||
CMD ["python", "main.py"]
|
25
kadyrov_aydar_lab_2/app_two/main.py
Normal file
25
kadyrov_aydar_lab_2/app_two/main.py
Normal file
@ -0,0 +1,25 @@
|
||||
import os
|
||||
|
||||
def get_largest_number_from_file(filepath):
|
||||
with open(filepath, 'r') as f:
|
||||
numbers = [int(line.strip()) for line in f.readlines()]
|
||||
return max(numbers)
|
||||
|
||||
def save_square_of_number(number, output_filepath):
|
||||
result = number ** 2
|
||||
with open(output_filepath, 'w') as f:
|
||||
f.write(str(result))
|
||||
|
||||
def main():
|
||||
input_filepath = '/var/result/data.txt'
|
||||
output_filepath = '/var/result/result.txt'
|
||||
|
||||
if os.path.exists(input_filepath):
|
||||
largest_number = get_largest_number_from_file(input_filepath)
|
||||
save_square_of_number(largest_number, output_filepath)
|
||||
print(f"Largest number squared: {largest_number}^2 saved to {output_filepath}")
|
||||
else:
|
||||
print(f"Input file {input_filepath} not found!")
|
||||
|
||||
if __name__ == "__main__":
|
||||
main()
|
7
kadyrov_aydar_lab_2/data_generator/Dockerfile
Normal file
7
kadyrov_aydar_lab_2/data_generator/Dockerfile
Normal file
@ -0,0 +1,7 @@
|
||||
FROM python:3.9-slim
|
||||
|
||||
WORKDIR /app
|
||||
|
||||
COPY . /app
|
||||
|
||||
CMD ["python", "generate_data.py"]
|
29
kadyrov_aydar_lab_2/data_generator/generate_data.py
Normal file
29
kadyrov_aydar_lab_2/data_generator/generate_data.py
Normal file
@ -0,0 +1,29 @@
|
||||
import os
|
||||
import random
|
||||
|
||||
|
||||
def generate_random_files(directory, num_files, num_lines_per_file, min_value, max_value):
|
||||
os.makedirs(directory, exist_ok=True)
|
||||
|
||||
for i in range(num_files):
|
||||
file_path = os.path.join(directory, f"file_{i + 1}.txt")
|
||||
with open(file_path, 'w') as f:
|
||||
for _ in range(num_lines_per_file):
|
||||
random_number = random.randint(min_value, max_value)
|
||||
f.write(f"{random_number}\n")
|
||||
print(f"Generated file: {file_path}")
|
||||
|
||||
|
||||
def main():
|
||||
data_directory = '/var/data'
|
||||
num_files = 10
|
||||
num_lines_per_file = 12
|
||||
min_value = 1
|
||||
max_value = 100
|
||||
|
||||
generate_random_files(data_directory, num_files, num_lines_per_file, min_value, max_value)
|
||||
print(f"Generated {num_files} files in {data_directory}")
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
main()
|
22
kadyrov_aydar_lab_2/docker-compose.yml
Normal file
22
kadyrov_aydar_lab_2/docker-compose.yml
Normal file
@ -0,0 +1,22 @@
|
||||
version: '3'
|
||||
services:
|
||||
data_generator:
|
||||
build:
|
||||
context: ./data_generator
|
||||
volumes:
|
||||
- ./data:/var/data
|
||||
app_one:
|
||||
build:
|
||||
context: ./app_one
|
||||
volumes:
|
||||
- ./data:/var/data
|
||||
- ./result:/var/result
|
||||
depends_on:
|
||||
- data_generator
|
||||
app_two:
|
||||
build:
|
||||
context: ./app_two
|
||||
volumes:
|
||||
- ./result:/var/result
|
||||
depends_on:
|
||||
- app_one
|
Loading…
Reference in New Issue
Block a user