antonov_dmitry_lab_5 #35
91
antonov_dmitry_lab_5/README.md
Normal file
91
antonov_dmitry_lab_5/README.md
Normal file
@ -0,0 +1,91 @@
|
|||||||
|
# Лабораторная работа №5 - Вспоминаем математику или параллельное перемножение матриц
|
||||||
|
|
||||||
|
Изучение параллельного умножения матриц
|
||||||
|
|
||||||
|
# Задачи
|
||||||
|
|
||||||
|
Кратко: реализовать умножение двух больших квадратных матриц.
|
||||||
|
|
||||||
|
Подробно: в лабораторной работе требуется сделать два алгоритма: обычный и параллельный
|
||||||
|
(задание со * - реализовать это в рамках одного алгоритма). В параллельном алгоритме предусмотреть
|
||||||
|
ручное задание количества потоков (число потоков = 1 как раз и реализует задание со *), каждый из
|
||||||
|
которых будет выполнять умножение элементов матрицы в рамках своей зоны ответственности.
|
||||||
|
|
||||||
|
Сделать несколько бенчмарков последовательного и параллельного алгоритма на умножение двух матриц
|
||||||
|
размером 100x100, 300x300, 500x500 элементов.
|
||||||
|
# Запуск
|
||||||
|
|
||||||
|
Проект запускается в ide просто по нажатию у питон файла на функцию мейн.
|
||||||
|
Нужно последовательно запустить функцию мейн у файлов simple_app.py, benchmark.py.
|
||||||
|
|
||||||
|
# Описание работы:
|
||||||
|
Развернули два приложения
|
||||||
|
|
||||||
|
1. Приложение 1 - веб приложение для умножения матриц
|
||||||
|
2. Приложение 2 - консольное приложение для сравнения эффективности работы алгоритмов.
|
||||||
|
|
||||||
|
Первое приложение дает нам возможность умножить матрицы, получить результат в интерактивном режиме
|
||||||
|
с указанием используемого алгоритма и с указанием размера матрицы.
|
||||||
|
В программе предусмотрена возможность задания количества процессов для распараллеливания.
|
||||||
|
Используется библиотека python multiprocessing.
|
||||||
|
|
||||||
|
На рис 3 видно, что с использованием параллельного алгоритма скорость обработки увеличивается довольно
|
||||||
|
существенно. Но оптимальная скорость достигается при кол-ве потоков = кол-ву потоков процессора
|
||||||
|
У меня их 16.
|
||||||
|
|
||||||
|
<p>
|
||||||
|
<div>Форма веб приложения для указания парметров умножения матриц</div>
|
||||||
|
<img src="screens/img.png" width="650" title="Форма веб приложения ">
|
||||||
|
</p>
|
||||||
|
<p>
|
||||||
|
<div>Результат умножения в интерактивном режиме</div>
|
||||||
|
<img src="screens/img_1.png" width="650" title="Результат умножения">
|
||||||
|
</p>
|
||||||
|
<p>
|
||||||
|
<div>Сравнение бенчмарков</div>
|
||||||
|
<img src="screens/img_2.png" width="650" title="Сравнение бенчмарков">
|
||||||
|
</p>
|
||||||
|
<p>
|
||||||
|
<div>Параллельное умножение в коде</div>
|
||||||
|
<img src="screens/img_3.png" width="650" title="Параллельное умножение">
|
||||||
|
</p>
|
||||||
|
|
||||||
|
* Время обычное: 0.43517565727233887 с
|
||||||
|
* Размер матрицы: 100x100
|
||||||
|
* Время обычное: 11.15409231185913 с
|
||||||
|
* Размер матрицы: 300x300
|
||||||
|
* Время обычное: 53.64867091178894 с
|
||||||
|
* Размер матрицы: 500x500
|
||||||
|
* Размер матрицы: 100x100
|
||||||
|
* Время параллельное: 0.582118034362793 с
|
||||||
|
* Потоков: 2
|
||||||
|
* Размер матрицы: 300x300
|
||||||
|
* Время параллельное: 6.083630800247192 с
|
||||||
|
* Потоков: 2
|
||||||
|
* Размер матрицы: 500x500
|
||||||
|
* Время параллельное: 26.892888069152832 с
|
||||||
|
* Потоков: 2
|
||||||
|
* Размер матрицы: 100x100
|
||||||
|
* Время параллельное: 0.9034981727600098 с
|
||||||
|
* Потоков: 16
|
||||||
|
* Размер матрицы: 300x300
|
||||||
|
* Время параллельное: 2.9237937927246094 с
|
||||||
|
* Потоков: 16
|
||||||
|
* Размер матрицы: 500x500
|
||||||
|
* Время параллельное: 10.55041241645813 с
|
||||||
|
* Потоков: 16
|
||||||
|
* Размер матрицы: 100x100
|
||||||
|
* Время параллельное: 1.5674595832824707 с
|
||||||
|
* Потоков: 32
|
||||||
|
* Размер матрицы: 300x300
|
||||||
|
* Время параллельное: 4.185227394104004 с
|
||||||
|
* Потоков: 32
|
||||||
|
* Размер матрицы: 500x500
|
||||||
|
* Время параллельное: 11.912990808486938 с
|
||||||
|
* Потоков: 32
|
||||||
|
|
||||||
|
|
||||||
|
|
||||||
|
# Ссылка на видео
|
||||||
|
https://disk.yandex.ru/i/I_1oUuNTveYUdg
|
||||||
|
|
82
antonov_dmitry_lab_5/benchmark.py
Normal file
82
antonov_dmitry_lab_5/benchmark.py
Normal file
@ -0,0 +1,82 @@
|
|||||||
|
import multiprocessing
|
||||||
|
|
||||||
|
import numpy as np
|
||||||
|
import time
|
||||||
|
|
||||||
|
|
||||||
|
def multiply_matrices(matrix_a, matrix_b):
|
||||||
|
if len(matrix_a[0]) != len(matrix_b):
|
||||||
|
raise ValueError("матрицы имеют разную длину")
|
||||||
|
|
||||||
|
result = [[0 for _ in range(len(matrix_b[0]))] for _ in range(len(matrix_a))]
|
||||||
|
|
||||||
|
for i in range(len(matrix_a)):
|
||||||
|
for j in range(len(matrix_b[0])):
|
||||||
|
for k in range(len(matrix_b)):
|
||||||
|
result[i][j] += matrix_a[i][k] * matrix_b[k][j]
|
||||||
|
|
||||||
|
return result
|
||||||
|
|
||||||
|
|
||||||
|
def multiply_row(args):
|
||||||
|
matrix_a, matrix_b, i = args
|
||||||
|
row_result = [0 for _ in range(len(matrix_b[0]))]
|
||||||
|
for j in range(len(matrix_b[0])):
|
||||||
|
for k in range(len(matrix_b)):
|
||||||
|
row_result[j] += matrix_a[i][k] * matrix_b[k][j]
|
||||||
|
return row_result, i
|
||||||
|
|
||||||
|
|
||||||
|
def multiply_matrices_parallel(matrix_a, matrix_b, threads):
|
||||||
|
if len(matrix_a[0]) != len(matrix_b):
|
||||||
|
raise ValueError("матрицы имеют разную длину")
|
||||||
|
|
||||||
|
result = [[0 for _ in range(len(matrix_b[0]))] for _ in range(len(matrix_a))]
|
||||||
|
|
||||||
|
with multiprocessing.Pool(processes=threads) as pool:
|
||||||
|
args_list = [(matrix_a, matrix_b, i) for i in range(len(matrix_a))]
|
||||||
|
rows_results = pool.map(multiply_row, args_list)
|
||||||
|
|
||||||
|
for row_result, row_index in rows_results:
|
||||||
|
result[row_index] = row_result
|
||||||
|
|
||||||
|
return result
|
||||||
|
|
||||||
|
|
||||||
|
def benchmark_sequential(size):
|
||||||
|
matrix_a = np.random.rand(size, size)
|
||||||
|
matrix_b = np.random.rand(size, size)
|
||||||
|
|
||||||
|
start_time = time.time()
|
||||||
|
multiply_matrices(matrix_a, matrix_b)
|
||||||
|
end_time = time.time()
|
||||||
|
|
||||||
|
return end_time - start_time
|
||||||
|
|
||||||
|
|
||||||
|
def benchmark_parallel(size, num_threads):
|
||||||
|
matrix_a = np.random.rand(size, size)
|
||||||
|
matrix_b = np.random.rand(size, size)
|
||||||
|
|
||||||
|
start_time = time.time()
|
||||||
|
multiply_matrices_parallel(matrix_a, matrix_b, num_threads)
|
||||||
|
end_time = time.time()
|
||||||
|
|
||||||
|
return end_time - start_time
|
||||||
|
|
||||||
|
|
||||||
|
if __name__ == "__main__":
|
||||||
|
sizes = [100, 300, 500]
|
||||||
|
threads = [2, 16, 32]
|
||||||
|
|
||||||
|
for size in sizes:
|
||||||
|
sequential_time = benchmark_sequential(size)
|
||||||
|
print(f"Время обычное: {sequential_time} с")
|
||||||
|
print(f"Размер матрицы: {size}x{size}")
|
||||||
|
|
||||||
|
for thread in threads:
|
||||||
|
for size in sizes:
|
||||||
|
parallel_time = benchmark_parallel(size, thread)
|
||||||
|
print(f"Размер матрицы: {size}x{size}")
|
||||||
|
print(f"Время параллельное: {parallel_time} с")
|
||||||
|
print(f"Потоков: {thread}")
|
BIN
antonov_dmitry_lab_5/screens/img.png
Normal file
BIN
antonov_dmitry_lab_5/screens/img.png
Normal file
Binary file not shown.
After Width: | Height: | Size: 25 KiB |
BIN
antonov_dmitry_lab_5/screens/img_1.png
Normal file
BIN
antonov_dmitry_lab_5/screens/img_1.png
Normal file
Binary file not shown.
After Width: | Height: | Size: 68 KiB |
BIN
antonov_dmitry_lab_5/screens/img_2.png
Normal file
BIN
antonov_dmitry_lab_5/screens/img_2.png
Normal file
Binary file not shown.
After Width: | Height: | Size: 56 KiB |
BIN
antonov_dmitry_lab_5/screens/img_3.png
Normal file
BIN
antonov_dmitry_lab_5/screens/img_3.png
Normal file
Binary file not shown.
After Width: | Height: | Size: 63 KiB |
73
antonov_dmitry_lab_5/simple_app.py
Normal file
73
antonov_dmitry_lab_5/simple_app.py
Normal file
@ -0,0 +1,73 @@
|
|||||||
|
import multiprocessing
|
||||||
|
|
||||||
|
from flask import Flask, render_template, request
|
||||||
|
import numpy as np
|
||||||
|
import concurrent.futures
|
||||||
|
|
||||||
|
app = Flask(__name__)
|
||||||
|
|
||||||
|
|
||||||
|
def multiply_matrices(matrix_a, matrix_b):
|
||||||
|
if len(matrix_a[0]) != len(matrix_b):
|
||||||
|
raise ValueError("матрицы имеют разную длину")
|
||||||
|
|
||||||
|
result = [[0 for _ in range(len(matrix_b[0]))] for _ in range(len(matrix_a))]
|
||||||
|
|
||||||
|
for i in range(len(matrix_a)):
|
||||||
|
for j in range(len(matrix_b[0])):
|
||||||
|
for k in range(len(matrix_b)):
|
||||||
|
result[i][j] += matrix_a[i][k] * matrix_b[k][j]
|
||||||
|
|
||||||
|
return result
|
||||||
|
|
||||||
|
|
||||||
|
def multiply_row(args):
|
||||||
|
matrix_a, matrix_b, i = args
|
||||||
|
row_result = [0 for _ in range(len(matrix_b[0]))]
|
||||||
|
for j in range(len(matrix_b[0])):
|
||||||
|
for k in range(len(matrix_b)):
|
||||||
|
row_result[j] += matrix_a[i][k] * matrix_b[k][j]
|
||||||
|
return row_result, i
|
||||||
|
|
||||||
|
|
||||||
|
def multiply_matrices_parallel(matrix_a, matrix_b, threads):
|
||||||
|
if len(matrix_a[0]) != len(matrix_b):
|
||||||
|
raise ValueError("матрицы имеют разную длину")
|
||||||
|
|
||||||
|
result = [[0 for _ in range(len(matrix_b[0]))] for _ in range(len(matrix_a))]
|
||||||
|
|
||||||
|
with multiprocessing.Pool(processes=threads) as pool:
|
||||||
|
args_list = [(matrix_a, matrix_b, i) for i in range(len(matrix_a))]
|
||||||
|
rows_results = pool.map(multiply_row, args_list)
|
||||||
|
|
||||||
|
for row_result, row_index in rows_results:
|
||||||
|
result[row_index] = row_result
|
||||||
|
|
||||||
|
return result
|
||||||
|
|
||||||
|
|
||||||
|
@app.route('/')
|
||||||
|
def index():
|
||||||
|
return render_template('index.html')
|
||||||
|
|
||||||
|
|
||||||
|
@app.route('/multiply', methods=['POST'])
|
||||||
|
def multiply():
|
||||||
|
n = int(request.form.get('matrix_a'))
|
||||||
|
matrix_a = np.random.randint(10, size=(n, n))
|
||||||
|
matrix_b = np.random.randint(10, size=(n, n))
|
||||||
|
|
||||||
|
operation_type = request.form.get('operation_type')
|
||||||
|
|
||||||
|
if operation_type == 'sequential':
|
||||||
|
result = multiply_matrices(matrix_a, matrix_b)
|
||||||
|
elif operation_type == 'parallel':
|
||||||
|
result = multiply_matrices_parallel(matrix_a, matrix_b, 16)
|
||||||
|
else:
|
||||||
|
return "Invalid operation type"
|
||||||
|
|
||||||
|
return render_template('result.html', matrix_a=matrix_a, matrix_b=matrix_b, result=result)
|
||||||
|
|
||||||
|
|
||||||
|
if __name__ == '__main__':
|
||||||
|
app.run(debug=True)
|
24
antonov_dmitry_lab_5/templates/index.html
Normal file
24
antonov_dmitry_lab_5/templates/index.html
Normal file
@ -0,0 +1,24 @@
|
|||||||
|
<!DOCTYPE html>
|
||||||
|
<html lang="en">
|
||||||
|
<head>
|
||||||
|
<meta charset="UTF-8">
|
||||||
|
<meta http-equiv="X-UA-Compatible" content="IE=edge">
|
||||||
|
<meta name="viewport" content="width=device-width, initial-scale=1.0">
|
||||||
|
<title>Умножение матриц</title>
|
||||||
|
</head>
|
||||||
|
<body>
|
||||||
|
<h1>Умножение матриц</h1>
|
||||||
|
<form action="/multiply" method="post">
|
||||||
|
<label for="matrix_a">Размер матриц:</label>
|
||||||
|
<input type="text" name="matrix_a" required><br>
|
||||||
|
|
||||||
|
<label for="operation_type">Как умножить:</label>
|
||||||
|
<select name="operation_type">
|
||||||
|
<option value="sequential">Последовательно</option>
|
||||||
|
<option value="parallel">Параллельно</option>
|
||||||
|
</select><br>
|
||||||
|
|
||||||
|
<button type="submit">Умножение матриц</button>
|
||||||
|
</form>
|
||||||
|
</body>
|
||||||
|
</html>
|
19
antonov_dmitry_lab_5/templates/result.html
Normal file
19
antonov_dmitry_lab_5/templates/result.html
Normal file
@ -0,0 +1,19 @@
|
|||||||
|
<!DOCTYPE html>
|
||||||
|
<html lang="en">
|
||||||
|
<head>
|
||||||
|
<meta charset="UTF-8">
|
||||||
|
<meta http-equiv="X-UA-Compatible" content="IE=edge">
|
||||||
|
<meta name="viewport" content="width=device-width, initial-scale=1.0">
|
||||||
|
<title>Результат</title>
|
||||||
|
</head>
|
||||||
|
<body>
|
||||||
|
<h1>Результат</h1>
|
||||||
|
<p>Матрица A:</p>
|
||||||
|
<pre>{{ matrix_a }}</pre>
|
||||||
|
<p>Матрица B:</p>
|
||||||
|
<pre>{{ matrix_b }}</pre>
|
||||||
|
<p>Результат:</p>
|
||||||
|
<pre>{{ result }}</pre>
|
||||||
|
<a href="/">Назад</a>
|
||||||
|
</body>
|
||||||
|
</html>
|
Loading…
Reference in New Issue
Block a user