Merge pull request 'presnyakova_victoria_lab4' (#135) from presnyakova_victoria_lab4 into main
Reviewed-on: #135
BIN
presnyakova_victoria_lab_4/lessons/lesson_1/img.png
Normal file
After Width: | Height: | Size: 33 KiB |
BIN
presnyakova_victoria_lab_4/lessons/lesson_1/img_1.png
Normal file
After Width: | Height: | Size: 28 KiB |
25
presnyakova_victoria_lab_4/lessons/lesson_1/receive.py
Normal file
@ -0,0 +1,25 @@
|
||||
import pika, sys, os
|
||||
|
||||
def main():
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='hello')
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" [x] Received {body}")
|
||||
|
||||
channel.basic_consume(queue='hello', on_message_callback=callback, auto_ack=True)
|
||||
|
||||
print(' [*] Waiting for messages. To exit press CTRL+C')
|
||||
channel.start_consuming()
|
||||
|
||||
if __name__ == '__main__':
|
||||
try:
|
||||
main()
|
||||
except KeyboardInterrupt:
|
||||
print('Interrupted')
|
||||
try:
|
||||
sys.exit(0)
|
||||
except SystemExit:
|
||||
os._exit(0)
|
11
presnyakova_victoria_lab_4/lessons/lesson_1/send.py
Normal file
@ -0,0 +1,11 @@
|
||||
import pika
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='hello')
|
||||
|
||||
channel.basic_publish(exchange='', routing_key='hello', body='Hello World!')
|
||||
print(" [x] Sent 'Hello World!'")
|
||||
connection.close()
|
BIN
presnyakova_victoria_lab_4/lessons/lesson_2/img.png
Normal file
After Width: | Height: | Size: 114 KiB |
BIN
presnyakova_victoria_lab_4/lessons/lesson_2/img_1.png
Normal file
After Width: | Height: | Size: 88 KiB |
19
presnyakova_victoria_lab_4/lessons/lesson_2/new_task.py
Normal file
@ -0,0 +1,19 @@
|
||||
import pika
|
||||
import sys
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='task_queue', durable=True)
|
||||
|
||||
message = ' '.join(sys.argv[1:]) or "Hello World!"
|
||||
channel.basic_publish(
|
||||
exchange='',
|
||||
routing_key='task_queue',
|
||||
body=message,
|
||||
properties=pika.BasicProperties(
|
||||
delivery_mode=pika.DeliveryMode.Persistent
|
||||
))
|
||||
print(f" [x] Sent {message}")
|
||||
connection.close()
|
22
presnyakova_victoria_lab_4/lessons/lesson_2/worker.py
Normal file
@ -0,0 +1,22 @@
|
||||
import pika
|
||||
import time
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.queue_declare(queue='task_queue', durable=True)
|
||||
print(' [*] Waiting for messages. To exit press CTRL+C')
|
||||
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" [x] Received {body.decode()}")
|
||||
time.sleep(body.count(b'.'))
|
||||
print(" [x] Done")
|
||||
ch.basic_ack(delivery_tag=method.delivery_tag)
|
||||
|
||||
|
||||
channel.basic_qos(prefetch_count=1)
|
||||
channel.basic_consume(queue='task_queue', on_message_callback=callback)
|
||||
|
||||
channel.start_consuming()
|
13
presnyakova_victoria_lab_4/lessons/lesson_3/emit_log.py
Normal file
@ -0,0 +1,13 @@
|
||||
import pika
|
||||
import sys
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.exchange_declare(exchange='logs', exchange_type='fanout')
|
||||
|
||||
message = ' '.join(sys.argv[1:]) or "info: Hello World!"
|
||||
channel.basic_publish(exchange='logs', routing_key='', body=message)
|
||||
print(f" [x] Sent {message}")
|
||||
connection.close()
|
BIN
presnyakova_victoria_lab_4/lessons/lesson_3/img.png
Normal file
After Width: | Height: | Size: 39 KiB |
BIN
presnyakova_victoria_lab_4/lessons/lesson_3/img_1.png
Normal file
After Width: | Height: | Size: 30 KiB |
22
presnyakova_victoria_lab_4/lessons/lesson_3/receive_logs.py
Normal file
@ -0,0 +1,22 @@
|
||||
import pika
|
||||
|
||||
connection = pika.BlockingConnection(
|
||||
pika.ConnectionParameters(host='localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
channel.exchange_declare(exchange='logs', exchange_type='fanout')
|
||||
|
||||
result = channel.queue_declare(queue='', exclusive=True)
|
||||
queue_name = result.method.queue
|
||||
|
||||
channel.queue_bind(exchange='logs', queue=queue_name)
|
||||
|
||||
print(' [*] Waiting for logs. To exit press CTRL+C')
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print(f" [x] {body}")
|
||||
|
||||
channel.basic_consume(
|
||||
queue=queue_name, on_message_callback=callback, auto_ack=True)
|
||||
|
||||
channel.start_consuming()
|
19
presnyakova_victoria_lab_4/publisher_app/app.py
Normal file
@ -0,0 +1,19 @@
|
||||
from flask import Flask, render_template, request
|
||||
from publisher import publish_messages
|
||||
|
||||
app = Flask(__name__)
|
||||
|
||||
|
||||
@app.route('/')
|
||||
def index():
|
||||
return "это publisher"
|
||||
|
||||
|
||||
@app.route('/publish', methods=['GET'])
|
||||
def publish():
|
||||
publish_messages()
|
||||
return 'Начало детекции дефектов'
|
||||
|
||||
|
||||
if __name__ == '__main__':
|
||||
app.run(debug=True)
|
27
presnyakova_victoria_lab_4/publisher_app/consumer_1.py
Normal file
@ -0,0 +1,27 @@
|
||||
import pika
|
||||
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print("Скрипт 1 обрабатывает дефект '{}'".format(body.decode()))
|
||||
|
||||
|
||||
def consume_messages():
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
exchange_name = 'logs'
|
||||
channel.exchange_declare(exchange=exchange_name, exchange_type='fanout')
|
||||
channel.queue_declare(queue='example_queue')
|
||||
channel.queue_bind(exchange=exchange_name, queue='example_queue')
|
||||
channel.basic_consume(queue='example_queue', on_message_callback=callback, auto_ack=True)
|
||||
print('Скрипт 1 ожидает дефектов')
|
||||
try:
|
||||
channel.start_consuming()
|
||||
except KeyboardInterrupt:
|
||||
print('Прервано. Останавливаем...')
|
||||
channel.stop_consuming()
|
||||
connection.close()
|
||||
|
||||
|
||||
if __name__ == '__main__':
|
||||
consume_messages()
|
27
presnyakova_victoria_lab_4/publisher_app/consumer_2.py
Normal file
@ -0,0 +1,27 @@
|
||||
import pika
|
||||
import time
|
||||
|
||||
def callback(ch, method, properties, body):
|
||||
print("Скрипт 2 обрабатывает дефект '{}'".format(body.decode()))
|
||||
time.sleep(2)
|
||||
|
||||
|
||||
def consume_messages():
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
exchange_name = 'logs'
|
||||
channel.exchange_declare(exchange=exchange_name, exchange_type='fanout')
|
||||
channel.queue_declare(queue='example_queue_2')
|
||||
channel.queue_bind(exchange=exchange_name, queue='example_queue_2')
|
||||
channel.basic_consume(queue='example_queue_2', on_message_callback=callback, auto_ack=True)
|
||||
print('Скрипт 2 ожидает дефектов')
|
||||
try:
|
||||
channel.start_consuming()
|
||||
except KeyboardInterrupt:
|
||||
print('Прервано. Останавливаем...')
|
||||
channel.stop_consuming()
|
||||
connection.close()
|
||||
|
||||
if __name__ == '__main__':
|
||||
consume_messages()
|
19
presnyakova_victoria_lab_4/publisher_app/publisher.py
Normal file
@ -0,0 +1,19 @@
|
||||
import pika
|
||||
import time
|
||||
|
||||
|
||||
def publish_messages():
|
||||
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
|
||||
channel = connection.channel()
|
||||
|
||||
exchange_name = 'logs'
|
||||
channel.exchange_declare(exchange=exchange_name, exchange_type='fanout')
|
||||
channel.queue_declare(queue='example_queue')
|
||||
# Отдаем сообщение в 'logs' exchange каждую секунду
|
||||
while True:
|
||||
message = "Дефект обнаружен" # Сообщение
|
||||
channel.basic_publish(exchange='logs', routing_key='', body=message)
|
||||
print(f"Отправлено сообщение: {message}")
|
||||
time.sleep(1)
|
||||
print("Отправлено '{}'".format(message))
|
||||
connection.close()
|
54
presnyakova_victoria_lab_4/readme.md
Normal file
@ -0,0 +1,54 @@
|
||||
# Лабораторная работа №4 - Работа с брокером сообщений
|
||||
Lesson 1:
|
||||
![img.png](lessons/lesson_1/img.png) ![img.png](lessons/lesson_1/img_1.png)
|
||||
Lesson 2:
|
||||
![img.png](lessons/lesson_2/img.png) ![img.png](lessons/lesson_2/img_1.png)
|
||||
Lesson 3:
|
||||
![img.png](lessons/lesson_3/img.png) ![img.png](lessons/lesson_3/img_1.png)
|
||||
|
||||
|
||||
# Задачи
|
||||
|
||||
Необходимо выбрать предметную область и разработать следующие приложения:
|
||||
|
||||
1. **Publisher**.
|
||||
Программа, которая создаёт один **exchange** с типом _fanout_.
|
||||
Программа должна раз в секунду генерировать сообщения в журнал событий согласно вашей предметной области.
|
||||
Например, событие "пришёл заказ" или "сообщение от пользователя" или "необходимо создать отчёт".
|
||||
2. **Consumer 1**.
|
||||
Программа, которая создаёт под себя отдельную не анонимную (!) очередь (**queue**) (то есть имя queue НЕ пустая строка), создаёт **binding** на **exchange** и начинает принимать сообщения (_consume_).
|
||||
Программа должна обрабатывать сообщения 2-3 секунды.
|
||||
Можно реализовать через обычный _Thread.Sleep_ (для C#).
|
||||
3. **Consumer 2**.
|
||||
Аналогично _Consumer 1_, только сообщения необходимо обрабатывать моментально.
|
||||
Только имя очереди должно отличаться от _Consumer 1_.
|
||||
|
||||
Далее необходимо собрать и запустить приложения одновременно по одному экземпляру.
|
||||
|
||||
# Запуск
|
||||
|
||||
Проект запускается в ide просто по нажатию у питон файла на функцию мейн.
|
||||
Нужно последовательно запустить функцию мейн у файлов app.py, consumer1.py, consumer2.py.
|
||||
Очередь сообщений запускается такой командой
|
||||
docker run -it --rm --name rabbitmq -p 5672:5672 -p 15672:15672 rabbitmq:3-management
|
||||
|
||||
# Описание работы:
|
||||
Развернули два приложения
|
||||
Сервисы используем из предыдущей работы
|
||||
Предметная область - Скрипты и дефекты
|
||||
|
||||
1. Consumer 1 - Скрипт 1:
|
||||
2. Consumer 2 - Скрипт 2:
|
||||
|
||||
Оба скрипта обрабатывают дефекты.
|
||||
|
||||
Flask-приложение с RabbitMQ, использующего библиотеку pika для publisher и для consumers.
|
||||
Надо обязательно вызвать метод publish, иначе обработка дефектов не начнется.
|
||||
Приложение Flask (app.py), для источника дефектов (publisher) и двух скриптов-потребителей (consumer1.py и consumer2.py).
|
||||
Запускаем приложение Flask и обоих потребителей запускаем отдельно в разных терминалах.
|
||||
Consumer ы будут прослушивать сообщения, опубликованные publisher ом.
|
||||
|
||||
![img.png](screens/img.png)
|
||||
|
||||
# Ссылка на видео
|
||||
https://drive.google.com/file/d/1P8kKSZAre24I04DXL1WqkPtdL6RnDOPA/view?usp=sharing
|
BIN
presnyakova_victoria_lab_4/screens/img.png
Normal file
After Width: | Height: | Size: 84 KiB |