Anonymous Quiz
24%
asyncio позволяет выполнять задачи параллельно на нескольких ядрах процессора
50%
asyncio позволяет эффективно управлять большим количеством I/O операций
15%
asyncio обеспечивает защиту от состояния гонки
11%
asyncio упрощает синхронный ввод-вывод
👍5
LRU (Least Recently Used) cache — это алгоритм кэширования, который удаляет наименее недавно использованные элементы для освобождения места для новых. В этом алгоритме кэш запоминает, когда каждый элемент был использован в последний раз, и при необходимости удаления элемента удаляет тот, который использовался наиболее давно.
Обычно реализуется с использованием двух ключевых структур данных:
Модуль
functools
предоставляет встроенную реализацию LRU cache через декоратор lru_cache
. Вот пример использования этого декоратора:from functools import lru_cache
@lru_cache(maxsize=3)
def fibonacci(n):
if n < 2:
return n
return fibonacci(n-1) + fibonacci(n-2)
# Использование
print(fibonacci(10)) # 55
print(fibonacci.cache_info()) # CacheInfo(hits=8, misses=11, maxsize=3, currsize=3)
# Вывод значений из кэша
print(fibonacci(8)) # 21
print(fibonacci.cache_info()) # CacheInfo(hits=9, misses=11, maxsize=3, currsize=3)
lru_cache
в Python, упрощают внедрение.LRU cache является эффективным и простым способом улучшения производительности и управления памятью в системах с ограниченными ресурсами.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍5
Anonymous Quiz
29%
Методы класса в Python не могут быть вызваны без создания экземпляра класса
54%
В Python можно изменять атрибуты экземпляра класса в методах класса
15%
Атрибуты класса могут быть изменены только из методов класса
2%
Классы в Python не поддерживают наследование
👍1
Существует множество готовых реализаций систем очередей сообщений (Message Queue, MQ), каждая из которых предназначена для различных потребностей и сценариев использования. Вот некоторые из самых популярных и широко используемых реализаций MQ:
Это высокопроизводительная система очередей сообщений, построенная на протоколе AMQP (Advanced Message Queuing Protocol). Поддерживает различные паттерны маршрутизации, такие как очереди, маршрутизация по ключам и топологии обмена.
import pika
# Установка соединения с RabbitMQ
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
channel = connection.channel()
# Создание очереди
channel.queue_declare(queue='hello')
# Отправка сообщения
channel.basic_publish(exchange='',
routing_key='hello',
body='Hello World!')
print(" [x] Sent 'Hello World!'")
# Закрытие соединения
connection.close()
Это распределённая потоковая платформа, ориентированная на высокую пропускную способность и низкую задержку. Используется для построения систем обработки потоков данных в реальном времени.
from kafka import KafkaProducer
# Создание продюсера
producer = KafkaProducer(bootstrap_servers='localhost:9092')
# Отправка сообщения
producer.send('test-topic', b'Hello, Kafka!')
producer.flush()
# Закрытие продюсера
producer.close()
Существует множество готовых реализаций MQ, каждая из которых предназначена для различных сценариев использования и требований. Выбор подходящей реализации зависит от конкретных потребностей вашего проекта, таких как производительность, масштабируемость, простота использования и интеграции с другими системами.
Please open Telegram to view this post
VIEW IN TELEGRAM
❤4👍4🔥2👀1
Anonymous Quiz
15%
Использование multiprocessing.Queue
57%
Использование asyncio.gather
26%
Использование threading.Lock
2%
Использование os.fork
👍6👾1
RPC (Remote Procedure Call) — это протокол, который позволяет программам вызывать функции или процедуры, выполняющиеся на удалённом компьютере так, как если бы они выполнялись локально. RPC абстрагирует детали сетевого взаимодействия, предоставляя простой и знакомый способ выполнения распределённых вычислений.
import grpc
from concurrent import futures
import time
import calculator_pb2
import calculator_pb2_grpc
class CalculatorServicer(calculator_pb2_grpc.CalculatorServicer):
def Add(self, request, context):
response = calculator_pb2.AddReply()
response.result = request.a + request.b
return response
def serve():
server = grpc.server(futures.ThreadPoolExecutor(max_workers=10))
calculator_pb2_grpc.add_CalculatorServicer_to_server(CalculatorServicer(), server)
server.add_insecure_port('[::]:50051')
server.start()
try:
while True:
time.sleep(86400)
except KeyboardInterrupt:
server.stop(0)
if __name__ == '__main__':
serve()
Клиентская часть:
import grpc
import calculator_pb2
import calculator_pb2_grpc
def run():
with grpc.insecure_channel('localhost:50051') as channel:
stub = calculator_pb2_grpc.CalculatorStub(channel)
response = stub.Add(calculator_pb2.AddRequest(a=1, b=2))
print(f"1 + 2 = {response.result}")
if name == '__main__':
run()
syntax = "proto3";
service Calculator {
rpc Add (AddRequest) returns (AddReply) {}
}
message AddRequest {
int32 a = 1;
int32 b = 2;
}
message AddReply {
int32 result = 1;
}
RPC является мощным инструментом для построения распределённых систем, предоставляя простой и интуитивно понятный способ вызова удалённых процедур и улучшая взаимодействие между различными компонентами системы.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2
gRPC (Google Remote Procedure Call) — это современный высокопроизводительный фреймворк для реализации удалённых вызовов процедур (RPC). Он был разработан Google и использует протокол HTTP/2 для передачи данных, а также Protocol Buffers (protobuf) для сериализации и десериализации сообщений. gRPC поддерживает множество языков программирования и предназначен для создания распределённых систем и микросервисной архитектуры.
syntax = "proto3";
service Calculator {
rpc Add (AddRequest) returns (AddReply) {}
}
message AddRequest {
int32 a = 1;
int32 b = 2;
}
message AddReply {
int32 result = 1;
}
Для этого используется утилита
protoc
:protoc --python_out=. --grpc_python_out=. calculator.proto
Реализация сервера:
import grpc
from concurrent import futures
import time
import calculator_pb2
import calculator_pb2_grpc
class CalculatorServicer(calculator_pb2_grpc.CalculatorServicer):
def Add(self, request, context):
response = calculator_pb2.AddReply()
response.result = request.a + request.b
return response
def serve():
server = grpc.server(futures.ThreadPoolExecutor(max_workers=10))
calculator_pb2_grpc.add_CalculatorServicer_to_server(CalculatorServicer(), server)
server.add_insecure_port('[::]:50051')
server.start()
try:
while True:
time.sleep(86400)
except KeyboardInterrupt:
server.stop(0)
if __name__ == '__main__':
serve()
Реализация клиента:
import grpc
import calculator_pb2
import calculator_pb2_grpc
def run():
with grpc.insecure_channel('localhost:50051') as channel:
stub = calculator_pb2_grpc.CalculatorStub(channel)
response = stub.Add(calculator_pb2.AddRequest(a=1, b=2))
print(f"1 + 2 = {response.result}")
if name == '__main__':
run()
gRPC является мощным и гибким инструментом для построения современных распределённых систем, обеспечивая высокую производительность и масштабируемость, а также поддерживая множество языков программирования.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍5🔥2
ОПП (Объектно-ориентированное программирование) — это парадигма, основанная на концепции объектов. Объекты могут содержать данные в виде полей (или атрибутов) и код в виде процедур (или методов). Предоставляет структуру для организации программного кода таким образом, чтобы его было легче понимать, разрабатывать и поддерживать.
class Animal:
def __init__(self, name):
self.name = name
def speak(self):
raise NotImplementedError("Subclass must implement abstract method")
class Dog(Animal):
def speak(self):
return f"{self.name} says Woof!"
class Cat(Animal):
def speak(self):
return f"{self.name} says Meow!"
# Использование
animals = [Dog("Buddy"), Cat("Whiskers")]
for animal in animals:
print(animal.speak())
speak
.speak
.animals
содержит объекты различных классов, и полиморфизм позволяет вызывать метод speak
для каждого из них, не зная их конкретного класса.ООП — мощная парадигма программирования, предоставляющая инструменты для организации кода, повышения его повторного использования, модульности и расширяемости. Используя его, можно создавать более структурированные, гибкие и поддерживаемые программные решения.
Please open Telegram to view this post
VIEW IN TELEGRAM
💊6👍5❤2
Anonymous Quiz
14%
Менеджеры контекста используются для управления памятью
9%
Менеджеры контекста заменяют исключения на предупреждения
72%
Менеджеры контекста должны реализовывать методы enter и exit
6%
Менеджеры контекста не могут использоваться с асинхронным кодом
👍2🤔1🎉1
Типы данных делят на 2 группы: изменяемые и не изменяемые.
Упорядоченные коллекции, которые могут содержать элементы разных типов. Пример: [1, "apple", 3.14]. Списки часто используются для хранения и последовательного доступа к элементам.
e = [1, 2, 3, 4, 5]
Коллекции пар ключ-значение. Пример: {"name": "Alice", "age": 25}. Словари удобны для представления объектов с атрибутами. Ключом в словаре может быть значение с не изменяемым типом данных (int, float, str, tuple, bool, frozenset и т.д.)
g = {"name": "Alice", "age": 25}
Неупорядоченные коллекции уникальных элементов. Пример: {1, 2, 3}. Используются для удаления дубликатов и выполнения операций над множествами, таких как объединение, пересечение.
h = {1, 2, 3, 4, 5}
Это изменяемая последовательность целых чисел в диапазоне от 0 до 255. Они используются для работы с двоичными данными, например, при чтении файлов или сетевого взаимодействия. bytearray полезен, когда вам нужно изменять данные на уровне байтов.
ba = bytearray([50, 100, 150, 200])
Как положительные, так и отрицательные. Например, 1, 100, -20.
a = 5
Числа с плавающей точкой (то есть с дробной частью). Примеры: 3.14, -0.001
b = 2.5
Этот тип данных используется для представления комплексных чисел, которые включают в себя действительную и мнимую части. В Python комплексные числа могут быть созданы с помощью литерала j для мнимой части. Например, комплексное число 3 + 4j. Комплексные числа используются в научных и инженерных расчетах, где необходимо работать с числами, имеющими мнимую составляющую.
z = 3 + 4j
В старых версиях Python (2.x и ранее) существовал отдельный тип данных long для представления очень больших целых чисел. Однако в Python 3 и выше этот тип был упразднен, и теперь все целые числа (int) могут быть любой длины. Таким образом, в современном Python отдельного типа данных long не существует — все большие целые числа автоматически становятся int.
a = 12345678901234567890L # Python 2.x
a = 12345678901234567890 # Python 3
Текст, заключенный в одинарные, двойные или тройные кавычки. Например: "hello", 'world'.
c = "Hello, Python!"
Имеют всего два значения:
True
и False
. Они часто используются в условиях и логических выражениях.d = True
Похожи на списки, но являются неизменяемыми. Пример: (1, "apple", 3.14). Используются, когда данные не должны изменяться после их создания. Если кортеж содержит изменяемые данные, то он становится изменяемым
f = (1, 2, 3)
Это неизменяемая последовательность чисел, обычно используемая в циклах for. range полезен для итерации через серии числовых значений.
for i in range(0, 10):
print(i)
Этот тип данных имеет только одно возможное значение:
None
. Оно используется для обозначения отсутствия значения. Часто используется в логических операциях например if a is None:
a = None
Это неизменяемый аналог set. Так как frozenset неизменяем, он может использоваться в качестве ключа в словарях.
fs = frozenset([1, 2, 3])
Похожи на bytearray, но являются неизменяемыми. Они также представляют собой последовательности целых чисел от 0 до 255 и используются для работы с двоичными данными.
b = bytes([50, 100, 150, 200])
Please open Telegram to view this post
VIEW IN TELEGRAM
👍19🔥2❤1
Anonymous Quiz
21%
thread.sleep()
44%
thread.wait()
16%
thread.hold()
19%
thread.join()
Контекстный менеджер в Python - это специальный тип объекта, который предназначен для управления контекстом в блоке кода. Основная цель контекстного менеджера - обеспечить корректное управление ресурсами, такими как файлы, сетевые соединения или блокировки в многопоточных программах. Это помогает предотвратить ошибки, такие как утечки ресурсов, и делает код более читаемым и безопасным.Чтобы понять, как работает контекстный менеджер, рассмотрим два ключевых метода, которые он должен реализовывать:
enter
вызывается в начале блока кода, управляемого контекстным менеджером (обычно после ключевого слова with
), и обычно используется для выделения ресурсов.exit
вызывается после окончания блока кода и обычно занимается очисткой ресурсов.class FileHandler:
def init(self, filename, mode):
self.filename = filename
self.mode = mode
self.file = None
def enter(self):
self.file = open(self.filename, self.mode)
return self.file
def exit(self, exc_type, exc_val, exc_tb):
if self.file:
self.file.close()
# Использование контекстного менеджера
with FileHandler('example.txt', 'w') as f:
f.write('Привет, мир!')
# После выхода из блока with файл автоматически закрывается
В этом примере
FileHandler
- это контекстный менеджер для работы с файлами. Когда начинается блок with
, вызывается метод enter
, который открывает файл. После завершения работы в блоке with
автоматически вызывается метод exit
, который закрывает файл. Это предотвращает ошибки, связанные с забытым закрытием файла, и делает код более надежным и читаемым.Контекстные менеджеры широко используются в Python для управления ресурсами, их можно встретить в стандартной библиотеке (например,
open
для файлов), а также во многих сторонних библиотеках.Контекстный менеджер в Python - это способ управления ресурсами в блоке кода, обеспечивающий автоматическое выделение и освобождение ресурсов.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍10❤1
Anonymous Quiz
17%
dict.update()
49%
queue.Queue.put()
15%
set.add()
18%
list.append()
👍8
Декоратор в Python — это специальная функция, которая позволяет изменять или расширять поведение других функций или методов. Он оборачивает другую функцию (или класс) и позволяет выполнить какой-то код до или после основной функции, не изменяя её.
Декораторы могут изменять поведение функции, не изменяя её кода.
Они позволяют использовать общий код в нескольких функциях, уменьшая дублирование.
В Python декораторы могут быть применены к функции с использованием символа @, что делает код более читабельным и элегантным.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍9
Anonymous Quiz
42%
Протоколы позволяют проверять соответствие объектов во время выполнения
11%
Протоколы не могут использоваться с абстрактными методами
9%
Протоколы ограничивают наследование классов
38%
Протоколы требуют явного указания реализации методов
Различие между
init()
и new()
заключается в их роли при создании экземпляров классов.init()
не возвращает ничего и используется для установки значений атрибутов объекта.__init__()
. Это статический метод, который должен возвращать новый созданный объект, и он используется в особых случаях, например, при создании экземпляров синглтонов или при наследовании от неизменяемых типов данных, как tuple.Допустим, у нас есть класс
Person
, представляющий информацию о человеке. Мы используем init()
для инициализации атрибутов каждого объекта этого класса.class Person:
def __init__(self, name, age):
self.name = name
self.age = age
# Создание экземпляра класса Person
person1 = Person("Алексей", 30)
print(f"Имя: {person1.name}, Возраст: {person1.age}")
В этом примере
init()
используется для установки имени и возраста для каждого объекта Person. Это самый распространенный способ инициализации атрибутов в объектно-ориентированном программировании.new()
используется реже, но его можно применять в специфических сценариях, например, для создания синглтонов (одиночек).class Singleton:
_instance = None
def new(cls):
if cls._instance is None:
print("Создание экземпляра")
cls._instance = super(Singleton, cls).new(cls)
return cls._instance
# Создание экземпляров Singleton
singleton1 = Singleton()
singleton2 = Singleton()
print(singleton1 is singleton2) # Вернет True, так как оба объекта являются одним и тем же экземпляром
Здесь
new()
гарантирует, что класс Singleton
создает только один экземпляр. При попытке создать новый объект этого класса, new()
возвращает уже существующий экземпляр, если он есть, предотвращая создание новых экземпляров.Please open Telegram to view this post
VIEW IN TELEGRAM
🤔9👍5❤3🔥2
Anonymous Quiz
10%
Магические методы вызываются напрямую пользователем
23%
Магические методы всегда должны быть приватными
49%
Магические методы используются для перегрузки операторов и встроенных функций
18%
Магические методы не могут быть переопределены
👍2🔥1
Генератор в Python – это специальный тип функций, который позволяет вам возвращать значение и позже продолжить выполнение функции с того места, где она была остановлена. Это достигается с помощью ключевого слова
yield
.Главное отличие генератора от обычной функции заключается в том, что генератор возвращает итерируемый объект, через который можно пройти только один раз. Это позволяет эффективно работать с данными, не загружая полностью их в память. Это особенно полезно, когда вам нужно работать с большими объемами данных или когда вы не знаете заранее, сколько элементов вам понадобится.
def count_up_to(max):
count = 1
while count <= max:
yield count
count += 1
counter = count_up_to(5)
for num in counter:
print(num)
В этом примере функция
count_up_to
является генератором. Когда вы вызываете её, она не выполняет свой код сразу. Вместо этого, она возвращает итерируемый объект. Когда вы итерируетесь через этот объект (например, используя цикл for
), код внутри функции выполняется до первого yield
. Значение, которое следует за yield
, возвращается в цикл. При следующей итерации выполнение функции возобновляется сразу после yield
и продолжается до следующего yield
.Использование генераторов позволяет сэкономить ресурсы, так как значения генерируются по мере необходимости, а не хранятся в памяти.
В асинхронных функциях (
async def
) используется await
вместо yield
, но концептуально это очень похоже. Когда функция достигает await
, она возвращает управление вызывающей стороне, позволяя другим задачам выполняться, пока текущая задача находится в ожидании (например, ожидает ответа от сервера).import asyncio
async def fetch_data():
print('Start fetching')
await asyncio.sleep(2) # Имитация асинхронной задачи, например, запроса к серверу
print('Done fetching')
return {'data': 1}
async def main():
print('Before fetching')
result = await fetch_data()
print('Result:', result)
print('After fetching')
asyncio.run(main())
Здесь
fetch_data
является асинхронной функцией. Когда она достигает строки await asyncio.sleep(2)
, управление возвращается в main
, позволяя выполнять другие операции, в то время как fetch_data
находится в ожидании.Таким образом, генераторы и асинхронные функции позволяют Python более эффективно использовать однопоточную модель исполнения, предоставляя механизм для конкурентного выполнения задач, особенно в ситуациях, когда много времени уходит на ожидание ввода/вывода.
Генератор в Python - это инструмент для создания итератора, который можно перебирать (итерировать) один раз. Генераторы используются для более эффективной работы с данными, позволяя не загружать все данные в память сразу.
Please open Telegram to view this post
VIEW IN TELEGRAM
❤13👍8🔥1
Anonymous Quiz
12%
Сборка мусора работает только с типами данных, встроенными в Python
6%
Сборка мусора удаляет объекты сразу после их создания
3%
Сборка мусора выполняется вручную пользователем
78%
Сборка мусора основана на подсчете ссылок и сборке циклических ссылок
Индексы – это специальные структуры данных, которые используются для ускорения операций выборки (retrieval) и поиска данных в таблице. Они подобны индексам в книге: вместо того, чтобы перелистывать всю книгу (или всю таблицу данных) для поиска нужной информации, вы можете использовать индекс для быстрого нахождения необходимых данных.
Индексы существенно ускоряют поиск и выборку данных, особенно в больших таблицах. Без индексов база данных должна была бы осуществлять "полное сканирование таблицы" (full table scan), что очень ресурсоемко и медленно, особенно для больших объемов данных. Однако стоит учитывать, что создание и поддержание индексов также требует дополнительных ресурсов, включая место на диске и время на обновление индекса при изменении данных в таблице.
Существуют различные типы индексов, и они могут быть реализованы по-разному в зависимости от системы управления базами данных (СУБД), но обычно они используют структуры данных, такие как B-деревья или хеш-таблицы, для эффективного хранения и поиска данных.
Например, если вы создаете индекс для столбца "Фамилия" в таблице с записями сотрудников, СУБД создаст структуру данных (например, B-дерево), которая позволит быстро находить записи по значению фамилии, не перебирая каждую запись в таблице.
CREATE INDEX idx_lastname ON employees (lastname);
Эта SQL-команда создает индекс
idx_lastname
для столбца lastname
в таблице employees
. После создания этого индекса запросы, которые ищут сотрудников по фамилии, будут выполняться значительно быстрее.Индексы – это структуры, которые ускоряют поиск данных в таблицах, работая подобно индексам в книге. Они особенно полезны для больших таблиц и сложных запросов.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥10👍5💊2❤1