Поляры: Как ограничить количество потоков на полярах?Python

Программы на Python
Anonymous
Поляры: Как ограничить количество потоков на полярах?

Сообщение Anonymous »

По всей видимости, Polars потребляет все потоки в моем приложении, развернутом с помощью Gunicorn+Supervisor. Как лучше всего ограничить количество потоков для поляров? Я не читаю CSV и не пишу CSV (только, например, используя приведенный ниже код)? Кроме того, есть ли способ зарегистрировать количество потоков, потребляемых полярами в любое время?
├── Polars_script.py
import polars as pl

df = pl.read_csv("input.csv")

# Perform some basic operations
df = df.filter(pl.col("column_name") > 50) # Filter rows where 'column_name' > 50
df = df.with_column((pl.col("column_name") * 2).alias("new_column")) # Add a new column

# Write the DataFrame to a new CSV file
df.write_csv("output.csv")

print("Data processing complete. Output saved to output.csv")

├── app.py
from flask import Flask
import polars as pl

app = Flask(__name__)

@app.route('/process')
def process_data():
# Read a CSV file into a Polars DataFrame
df = pl.read_csv("input.csv")

# Perform some basic operations
df = df.filter(pl.col("column_name") > 50) # Filter rows where 'column_name' > 50
df = df.with_column((pl.col("column_name") * 2).alias("new_column")) # Add a new column

# Write the DataFrame to a new CSV file
df.write_csv("output.csv")

return "Data processing complete. Output saved to output.csv"

if __name__ == "__main__":
app.run()

├── Gunicorn_config.py
bind = "0.0.0.0:8000"
workers = 20

gunicorn -c gunicorn_config.py app:app


Подробнее здесь: https://stackoverflow.com/questions/786 ... -on-polars

Вернуться в «Python»