COPY είναι η εντολή υψηλής απόδοσης της PostgreSQL για μαζική φόρτωση και εξαγωγή δεδομένων — μεταφορά μεγάλου όγκου δεδομένων μεταξύ ενός αρχείου (ή stream) και ενός πίνακα πολύ ταχύτερα από επιμέρους INSERT δηλώσεις. Είναι το τυπικό εργαλείο για εισαγωγή/εξαγωγή μεγάλων συνόλων δεδομένων.
users (name, email, age) (FORMAT csv, HEADER );
users (FORMAT csv, HEADER );
\ users (FORMAT csv, HEADER )
COPY διαβάζει/γράφει ένα ολόκληρο αρχείο σε μία λειτουργία — δραματικά ταχύτερα από την εκτέλεση χιλιάδων επιμέρους INSERTs.
❌ thousands of individual INSERTs:
each is a separate statement → per-statement overhead, possibly per-row transactions,
network round-trips → SLOW for large data (can be 10-100x slower)
✅ COPY:
one bulk operation, minimal overhead, optimized data path → FAST
→ For loading large datasets, COPY is the go-to; INSERTs are for small/individual rows.
COPY (SQL command) → reads/writes files on the SERVER, needs superuser/file privileges
\copy (psql command) → reads/writes files on the CLIENT, no special privileges
→ Use \copy when running from your machine against a remote database.
✓ Use COPY (not INSERTs) for large data
✓ Consider dropping/disabling indexes and constraints during a huge load, then
recreating them after (building an index once is faster than maintaining it per-row)
✓ Load within a single transaction; increase maintenance_work_mem for index rebuilds
✓ For programmatic bulk inserts, use multi-row INSERT or the driver's COPY support
COPY είναι το απαραίτητο εργαλείο της PostgreSQL για αποτελεσματική μαζική φόρτωση και εξαγωγή δεδομένων, και η κατανόησή του είναι πολύτιμη για οποιοδήποτε σενάριο που περιλαμβάνει μεγάλα σύνολα δεδομένων — μεταφορές δεδομένων, ETL, εισαγωγές/εξαγωγές, seeding και analytics, που είναι κοινές πρακτικές ανάγκες.
Το κύριο πλεονέκτημα είναι η απόδοση: η φόρτωση μεγάλου όγκου δεδομένων με επιμέρους INSERT δηλώσεις είναι δραματικά αργή (overhead ανά δήλωση, round-trips — δυνητικά 10-100x πιο αργή), ενώ το COPY εκτελεί τη φόρτωση ως μία βελτιστοποιημένη μαζική λειτουργία, καθιστώντας το την επιλογή για εισαγωγή ή εξαγωγή μεγάλων συνόλων δεδομένων (χιλιάδες έως εκατομμύρια σειρές).
Η κατανόηση γιατί το COPY είναι πολύ ταχύτερο (μαζική λειτουργία έναντι overhead ανά σειρά) διευκρινίζει πότε να το χρησιμοποιήσετε (μεγάλα δεδομένα) έναντι INSERTs (μικρά/μεμονωμένα δεδομένα).
Η γνώση της πρακτικής διάκρισης μεταξύ COPY (server-side SQL εντολή, χρειάζεται πρόσβαση αρχείων/δικαιώματα) και \copy (psql client-side εντολή, χωρίς ειδικά δικαιώματα — λειτουργεί ενάντια σε απομακρυσμένες βάσεις δεδομένων από τη μηχανή σας) είναι σημαντική για την πραγματική χρήση της σε διάφορα πλαίσια.
Οι συμβουλές μαζικής φόρτωσης (χρήση COPY έναντι INSERTs, πτώση/ανακατασκευή δεικτών γύρω από τεράστιες φορτώσεις αφού η δημιουργία ενός δείκτη μία φορά είναι καλύτερη από τη διατήρησή του ανά σειρά, φόρτωση σε μια συναλλαγή) είναι πολύτιμη γνώση βελτιστοποίησης για μεγάλες εισαγωγές.
Επειδή οι μαζικές λειτουργίες δεδομένων (μεταφορές, εισαγωγές, εξαγωγές, ETL) είναι κοινές, και επειδή το COPY είναι ο τυπικός, υψηλής απόδοσης τρόπος για να τις χειριστείτε στην PostgreSQL (υπερκερνώντας δραματικά τα INSERTs για μεγάλα δεδομένα), η κατανόηση του COPY — το πλεονέκτημά του στην απόδοση, η διάκριση COPY vs \copy, και οι βέλτιστες πρακτικές μαζικής φόρτωσης — είναι πολύτιμη, πρακτικά σχετική γνώση για την αποτελεσματική μεταφορά μεγάλων συνόλων δεδομένων προς και από την Postgres, μια συχνή λειτουργική ανάγκη όπου η χρήση του σωστού εργαλείου (COPY) κάνει σημαντική διαφορά.