Trend semasa dalam pembelajaran mesin melibatkan pemindahan data ke persekitaran model untuk latihan. Walau bagaimanapun, bagaimana jika kita membalikkan proses ini? Memandangkan pangkalan data moden jauh lebih besar daripada model pembelajaran mesin, tidakkah lebih efisien untuk memindahkan model ke dataset?

Ini adalah konsep asas di sebalik PostgreSML - data kekal di lokasinya, dan anda membawa kod anda ke pangkalan data. Pendekatan terbalik kepada pembelajaran mesin menawarkan banyak kelebihan praktikal yang mencabar tanggapan konvensional mengenai "pangkalan data."

postgresml: gambaran keseluruhan dan kelebihannya

PostgreSML adalah platform pembelajaran mesin yang komprehensif yang dibina di atas pangkalan data PostgreSQL yang digunakan secara meluas. Ia memperkenalkan pendekatan novel yang disebut pembelajaran mesin "dalam-data", membolehkan anda melaksanakan pelbagai tugas ML dalam SQL tanpa memerlukan alat berasingan untuk setiap langkah.

• in-data ML: Keretapi, menyebarkan, dan menjalankan model ML secara langsung dalam pangkalan data PostgreSQL anda. Ini menghapuskan keperluan pemindahan data yang berterusan antara pangkalan data dan rangka kerja ML luaran, meningkatkan kecekapan dan mengurangkan latensi.
• SQL API: Leverages SQL untuk latihan, penalaan halus, dan menggunakan model pembelajaran mesin. Ini memudahkan aliran kerja untuk penganalisis data dan saintis kurang akrab dengan pelbagai rangka ML.
• Model pra-terlatih: mengintegrasikan dengan lancar dengan Huggingface, memberikan akses kepada banyak model pra-terlatih seperti Llama, Falcon, Bert, dan Mistral. Penyesuaian dan fleksibiliti:
menyokong pelbagai algoritma dari Scikit-learn, XGBoost, LGBM, Pytorch, dan Tensorflow, yang membolehkan pelbagai tugas pembelajaran yang diselia secara langsung dalam pangkalan data. Integrasi Ekosistem
• : Bekerja dengan mana-mana persekitaran yang menyokong postgres dan menawarkan SDK untuk pelbagai bahasa pengaturcaraan (JavaScript, Python, dan Rust sangat disokong dengan baik).
Tutorial ini akan menunjukkan ciri -ciri ini menggunakan aliran kerja pembelajaran mesin biasa:

pemuatan data

Preprocessing data

Latihan Model
HyperParameter Fine-penalaan
Pengeluaran Pengeluaran
4. Semua langkah ini akan dilakukan dalam pangkalan data Postgres. Mari kita mulakan!
aliran kerja pembelajaran yang diselia lengkap dengan postgresml

Bermula: Postgresml Free Tier

1. Buat akaun percuma di http://ipnx.cn/link/3349958a3e56580d4e415da345703886 :

Pilih Tier Percuma, yang menawarkan sumber yang murah hati:

Selepas mendaftar, anda akan mengakses konsol PostgreSML anda untuk menguruskan projek dan sumber.

Bahagian "Mengurus" membolehkan anda skala persekitaran anda berdasarkan keperluan pengiraan.

Postgresml memerlukan PostgreSQL. Panduan pemasangan untuk pelbagai platform boleh didapati:

• Linux
• Untuk WSL2, perintah berikut cukup:
Sahkan pemasangan:

sudo apt update
sudo apt install postgresql postgresql-contrib
sudo passwd postgres  # Set a new Postgres password
# Close and reopen your terminal

psql --version

Sebagai alternatif, gunakan sambungan vSCode seperti yang diterangkan dalam dokumentasinya.

psql

psql -h "host" -U "username" -p 6432 -d "database_name"

CREATE EXTENSION IF NOT EXISTS pgml;

SELECT pgml.version();

import seaborn as sns
diamonds = sns.load_dataset("diamonds")
diamonds.to_csv("diamonds.csv", index=False)

CREATE TABLE IF NOT EXISTS diamonds (
   index SERIAL PRIMARY KEY,
   carat FLOAT,
   cut VARCHAR(255),
   color VARCHAR(255),
   clarity VARCHAR(255),
   depth FLOAT,
   table_ FLOAT,
   price INT,
   x FLOAT,
   y FLOAT,
   z FLOAT
);

INSERT INTO diamonds
   (carat, cut, color, clarity, depth, table_, price, x, y, z)
   FROM '~/full/path/to/diamonds.csv'
   DELIMITER ','
   CSV HEADER;

SELECT * FROM diamonds LIMIT 10;

SELECT pgml.train(
 project_name => 'Diamond prices prediction',
 task => 'regression',
 relation_name => 'diamonds',
 y_column_name => 'price',
 algorithm => 'xgboost'
);

SELECT pgml.train(
 project_name => 'Diamond cut quality prediction',
 task => 'classification',
 relation_name => 'diamonds',
 y_column_name => 'cut',
 algorithm => 'xgboost',
 test_size => 0.1
);

sudo apt update
sudo apt install postgresql postgresql-contrib
sudo passwd postgres  # Set a new Postgres password
# Close and reopen your terminal

psql --version

psql -h "host" -U "username" -p 6432 -d "database_name"

CREATE EXTENSION IF NOT EXISTS pgml;

SELECT pgml.version();

import seaborn as sns
diamonds = sns.load_dataset("diamonds")
diamonds.to_csv("diamonds.csv", index=False)

Atas ialah kandungan terperinci Tutorial Postgresml: Melakukan Pembelajaran Mesin dengan SQL. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!