Merge pull request 'turner_ilya_lab_4' (#154) from turner_ilya_lab_4 into main
Reviewed-on: #154
25
turner_ilya_lab_4/Consumer_1.py
Normal file
@ -0,0 +1,25 @@
|
||||
import random
|
||||
import time
|
||||
import pika
|
||||
|
||||
queue_name = 'first_queue'
|
||||
exchange = 'logs'
|
||||
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" Consumer_1: было получено сообщение {body.decode()}")
|
||||
time.sleep(random.choice([2, 3]))
|
||||
print(f" Consumer_1: было обработано сообщение")
|
||||
ch.basic_ack(delivery_tag=method.delivery_tag)
|
||||
|
||||
|
||||
if __name__ == '__main__':
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
try:
|
||||
channel.queue_declare(queue=queue_name) #queue
|
||||
channel.queue_bind(exchange=exchange, queue=queue_name) #binding
|
||||
channel.basic_consume(queue=queue_name, on_message_callback=callback)
|
||||
channel.start_consuming()
|
||||
except KeyboardInterrupt:
|
||||
connection.close()
|
22
turner_ilya_lab_4/Consumer_2.py
Normal file
@ -0,0 +1,22 @@
|
||||
import pika
|
||||
|
||||
queue_name = 'second_queue'
|
||||
exchange = 'logs'
|
||||
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" Consumer_2: было получено сообщение {body.decode()}")
|
||||
print(f" Consumer_2: было обработано сообщение")
|
||||
ch.basic_ack(delivery_tag=method.delivery_tag)
|
||||
|
||||
|
||||
if __name__ == '__main__':
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
try:
|
||||
channel.queue_declare(queue=queue_name) #queue
|
||||
channel.queue_bind(exchange=exchange, queue=queue_name) #binding
|
||||
channel.basic_consume(queue=queue_name, on_message_callback=callback)
|
||||
channel.start_consuming()
|
||||
except KeyboardInterrupt:
|
||||
connection.close()
|
18
turner_ilya_lab_4/Publisher.py
Normal file
@ -0,0 +1,18 @@
|
||||
import random
|
||||
import time
|
||||
import pika
|
||||
|
||||
if __name__ == '__main__':
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
channel.exchange_declare(exchange='logs', exchange_type='fanout')
|
||||
|
||||
try:
|
||||
while True:
|
||||
message = random.choice(["Необходимо подать заявление на поступление", "Обновлена информация о факультетах",
|
||||
"Обновлена информация о специальностях", "Изменение в конкурсных списках", "Начат доприем",
|
||||
"Приемная комиссия закрывается"])
|
||||
channel.basic_publish(exchange='logs', routing_key='', body=message)
|
||||
time.sleep(1)
|
||||
except KeyboardInterrupt:
|
||||
connection.close()
|
42
turner_ilya_lab_4/README.md
Normal file
@ -0,0 +1,42 @@
|
||||
# Лабораторная работа №4 - Работа с брокером сообщений
|
||||
## ПИбд-42 || Тюрнер Илья
|
||||
|
||||
### Цель лабораторной работы
|
||||
Изучение проектирования приложений при помощи брокера сообщений.
|
||||
|
||||
### Описание задач 1-2:
|
||||
В рамках данной лабораторной работы был установлен брокер сообщений RabbitMQ. После этого для обучения были пройдены первые три урока из RabbitMQ Tutorials на ЯП Python. Результаты приложены в виде скриншотов:
|
||||
|
||||
- Итоги первого урока:
|
||||
![изображение 1](./pictures/img_lesson_1.png)
|
||||
|
||||
- Итоги второго урока:
|
||||
![изображение 2](./pictures/img_lesson_2.png)
|
||||
|
||||
- Итоги третьего урока:
|
||||
![изображение 3](./pictures/img_lesson_3.png)
|
||||
|
||||
### Предметная область:
|
||||
В качестве предметной области применяется область из прошлой лабораторной работы - списки абитуриентов для поступления в университет.
|
||||
|
||||
### Описание задачи 3:
|
||||
Далее в рамках лабораторной работы по предметной области были разработаны демонстрационные приложения Publisher, Consumer_1 и Consumer_2. Результаты их работы:
|
||||
|
||||
- Данные по очереди first_queue, запущен один экземпляр Consumer_1:
|
||||
![изображение 1](./pictures/1_Consumer1.png)
|
||||
|
||||
- Данные по очереди second_queue, запущен один экземпляр Consumer_2:
|
||||
![изображение 2](./pictures/Consumer2.png)
|
||||
|
||||
- Данные по очереди first_queue, запущено два экземпляра Consumer_1:
|
||||
![изображение 3](./pictures/2_Consumer1.png)
|
||||
|
||||
- Данные по очереди first_queue, запущено три экземпляра Consumer_1:
|
||||
![изображение 4](./pictures/3_Consumer1.png)
|
||||
|
||||
### Выводы:
|
||||
По представленным данным хорошо видно, что second_queue не заполняется совсем, это связано с тем, что обработка сообщений там моментальная и в очереди им задерживаться не приходится. В свою очередь, Cunsomer_1 тратит на обработку сообщения 2-3 секунды, поэтому очередь first_queue достаточно быстро заполняется, если запущен один экземпляр. Также было обнаружено, что чем больше экземпляров Cunsomer_1 запущено, тем медленнее заполняется очередь. Это потому, что каждый из экземпляров занимается обработкой сообщений из очереди. С увеличением числа экземпляров можно достичь момента, когда очередь перестанет заполняться.
|
||||
|
||||
### Видео с демонстрацией работы:
|
||||
Размещено на платформе VK видео
|
||||
https://vk.com/video/@tyurner02?z=video303312410_456239080%2Fpl_303312410_-2
|
25
turner_ilya_lab_4/lesson_1/receive.py
Normal file
@ -0,0 +1,25 @@
|
||||
import pika, sys, os
|
||||
|
||||
def main():
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='hello')
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" [x] Received {body}")
|
||||
|
||||
channel.basic_consume(queue='hello', on_message_callback=callback, auto_ack=True)
|
||||
|
||||
print(' [*] Waiting for messages. To exit press CTRL+C')
|
||||
channel.start_consuming()
|
||||
|
||||
if __name__ == '__main__':
|
||||
try:
|
||||
main()
|
||||
except KeyboardInterrupt:
|
||||
print('Interrupted')
|
||||
try:
|
||||
sys.exit(0)
|
||||
except SystemExit:
|
||||
os._exit(0)
|
11
turner_ilya_lab_4/lesson_1/send.py
Normal file
@ -0,0 +1,11 @@
|
||||
import pika
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='hello')
|
||||
|
||||
channel.basic_publish(exchange='', routing_key='hello', body='Hello World!')
|
||||
print(" [x] Sent 'Hello World!'")
|
||||
connection.close()
|
19
turner_ilya_lab_4/lesson_2/new_task.py
Normal file
@ -0,0 +1,19 @@
|
||||
import pika
|
||||
import sys
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='task_queue', durable=True)
|
||||
|
||||
message = ' '.join(sys.argv[1:]) or "Hello World!"
|
||||
channel.basic_publish(
|
||||
exchange='',
|
||||
routing_key='task_queue',
|
||||
body=message,
|
||||
properties=pika.BasicProperties(
|
||||
delivery_mode=pika.DeliveryMode.Persistent
|
||||
))
|
||||
print(f" [x] Sent {message}")
|
||||
connection.close()
|
22
turner_ilya_lab_4/lesson_2/worker.py
Normal file
@ -0,0 +1,22 @@
|
||||
import pika
|
||||
import time
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='task_queue', durable=True)
|
||||
print(' [*] Waiting for messages. To exit press CTRL+C')
|
||||
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" [x] Received {body.decode()}")
|
||||
time.sleep(body.count(b'.'))
|
||||
print(" [x] Done")
|
||||
ch.basic_ack(delivery_tag=method.delivery_tag)
|
||||
|
||||
|
||||
channel.basic_qos(prefetch_count=1)
|
||||
channel.basic_consume(queue='task_queue', on_message_callback=callback)
|
||||
|
||||
channel.start_consuming()
|
13
turner_ilya_lab_4/lesson_3/emit_log.py
Normal file
@ -0,0 +1,13 @@
|
||||
import pika
|
||||
import sys
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.exchange_declare(exchange='logs', exchange_type='fanout')
|
||||
|
||||
message = ' '.join(sys.argv[1:]) or "info: Hello World!"
|
||||
channel.basic_publish(exchange='logs', routing_key='', body=message)
|
||||
print(f" [x] Sent {message}")
|
||||
connection.close()
|
22
turner_ilya_lab_4/lesson_3/receive_logs.py
Normal file
@ -0,0 +1,22 @@
|
||||
import pika
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.exchange_declare(exchange='logs', exchange_type='fanout')
|
||||
|
||||
result = channel.queue_declare(queue='', exclusive=True)
|
||||
queue_name = result.method.queue
|
||||
|
||||
channel.queue_bind(exchange='logs', queue=queue_name)
|
||||
|
||||
print(' [*] Waiting for logs. To exit press CTRL+C')
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" [x] {body}")
|
||||
|
||||
channel.basic_consume(
|
||||
queue=queue_name, on_message_callback=callback, auto_ack=True)
|
||||
|
||||
channel.start_consuming()
|
BIN
turner_ilya_lab_4/pictures/1_Consumer1.png
Normal file
After Width: | Height: | Size: 25 KiB |
BIN
turner_ilya_lab_4/pictures/2_Consumer1.png
Normal file
After Width: | Height: | Size: 27 KiB |
BIN
turner_ilya_lab_4/pictures/3_Consumer1.png
Normal file
After Width: | Height: | Size: 25 KiB |
BIN
turner_ilya_lab_4/pictures/Consumer2.png
Normal file
After Width: | Height: | Size: 27 KiB |
BIN
turner_ilya_lab_4/pictures/img_lesson_1.png
Normal file
After Width: | Height: | Size: 34 KiB |
BIN
turner_ilya_lab_4/pictures/img_lesson_2.png
Normal file
After Width: | Height: | Size: 40 KiB |
BIN
turner_ilya_lab_4/pictures/img_lesson_3.png
Normal file
After Width: | Height: | Size: 40 KiB |