Bazat e të dhënave

Ku dhe si i ruajnë aplikacionet të dhënat. · 202 terma

A short history of databases

Historia e shkurtër e databazave

1970: Codd shpik modelin relacional → IBM krijon SQL-në → 1979 Oracle → 1990 MySQL dhe PostgreSQL → 2009 MongoDB dhe valët NoSQL → sot databaza në cloud dhe vektoriale për AI. SQL-ja mbijetoi pothuajse 50 vjet.

ACID

ACID janë katër garancitë e transaksioneve: Atomiciteti (gjithçka ose asgjë), Konsistenca (rregullat s'thyhen), Izolimi (transaksionet s'ngatërrohen) dhe Qëndrueshmëria (pasi ruhet, s'humbet).

Aggregate functions (COUNT, SUM, AVG)

Funksionet përmbledhëse

COUNT() numëron rreshtat, SUM() mbledh, AVG() jep mesataren, MAX() dhe MIN() gjejnë ekstremet. Shpesh përdoren me GROUP BY për të llogaritur sipas grupeve.

AI assistants for databases

Asistentët AI për databaza

Asistentët AI shpjegojnë query të ndërlikuara, sugjerojnë indekse, shkruajnë migrime dhe — përmes MCP — mund të lexojnë skemën direkt. Jepu gjithmonë vetëm qasje leximi dhe kontrolloje çdo ndryshim para se ta ekzekutosh.

Aliases (AS)

Pseudonimet në SQL

AS i jep një emër të shkurtër kolonës ose tabelës: SELECT AVG(nota) AS mesatarja, ose FROM nxenesit n. E bën query-n më të lexueshme, sidomos me JOIN.

Archiving vs deleting data

Arkivimi kundrejt fshirjes

Fshirja e përhershme humbet historinë; „soft delete“ (fshire_me) e mban, por komplikon çdo query. Shpesh më mirë: zhvendose në një tabelë arkivi. Dhe kujdes: GDPR kërkon ndonjëherë fshirje të vërtetë të të dhënave personale.

Audit columns & history tables

Kolonat e auditimit dhe historiku

Shto created_at, updated_at dhe ndonjëherë created_by në çdo tabelë. Kur duhet historia e plotë (kush e ndryshoi notën dhe kur?), mbaj një tabelë historiku ose përdor „temporal tables“.

Auto increment

Numërim automatik

Auto increment do të thotë që databaza i jep vetë çdo rreshti të ri një numër ID-je, një më shumë se i pari: 1, 2, 3… Kështu s'ke pse e mendon vetë ID-në dhe s'ka rrezik dublikatash.

Backend-as-a-service databases (Supabase, Firebase, Convex)

Databazat si shërbim i plotë

Supabase (PostgreSQL), Firebase (Firestore), Convex, PocketBase dhe Appwrite japin databazë, autentikim, ruajtje skedarësh dhe përditësime në kohë reale gati — mund të ndërtosh një aplikacion pa shkruar backend.

Backup

Kopje rezervë

Backup-i është një kopje e të dhënave që e ruan në një vend tjetër, për t'i rikthyer nëse diçka shkon keq — prishet disku, fshihet diçka gabimisht ose sulmohet serveri.

Backup strategies & point-in-time recovery

Strategjitë e kopjeve rezervë

Rregulli 3-2-1: tri kopje, në dy media të ndryshme, një jashtë vendit. Bazat e të dhënave të menaxhuara ofrojnë „point-in-time recovery“ — kthim në çdo sekond të javës së fundit. Dhe provo rikthimin, jo vetëm backup-in!

Batching & bulk operations

Veprimet në grupe

Për të ndryshuar miliona rreshta, mos e bëj në një transaksion gjigant (bllokon tabelën) as rresht pas rreshti (shumë ngadalë) — bëje në grupe prej disa mijërash.

Big data

Të dhëna masive

Big data janë sasi aq të mëdha të dhënash — miliarda rreshta që rriten çdo sekondë — sa s'përpunohen dot me mjete të zakonshme si Excel-i. Kërkojnë shumë kompjuterë që punojnë bashkë.

Building JSON in SQL

Ndërtimi i JSON-it në SQL

PostgreSQL mund të ndërtojë JSON direkt: json_build_object për objekte dhe json_agg për lista — p.sh. një klasë me listën e nxënësve brenda, gati për API, me një query të vetme.

Caching database results

Cache për rezultatet e databazës

Për të dhëna që lexohen shpesh dhe ndryshojnë rrallë (lista e kategorive, profili), ruaji në Redis për pak minuta. Modeli „cache-aside“: kërko në cache, po s'gjendet lexo nga databaza dhe ruaje. Kujdes ta fshish kur ndryshojnë.

CAP theorem

Teorema CAP

Teorema CAP thotë që një sistem i shpërndarë, kur rrjeti ndahet, duhet të zgjedhë mes konsistencës (të gjithë shohin të njëjtën gjë) dhe disponueshmërisë (gjithmonë përgjigjet). S'mund t'i kesh të dyja njëkohësisht.

CASE expressions

Shprehjet CASE

CASE WHEN ... THEN ... ELSE ... END është „if“-i i SQL-së: kthen vlera të ndryshme sipas kushteve — p.sh. „Shkëlqyeshëm“ për notat 9–10.

Change data capture (CDC)

Kapja e ndryshimeve

CDC lexon çdo ndryshim në databazë (nga log-u i saj, WAL) dhe e dërgon diku tjetër në kohë reale — p.sh. në Elasticsearch për kërkim ose në një data warehouse. Debezium është mjeti më i njohur.

Cloud data warehouses (BigQuery, Snowflake)

Magazinat e të dhënave në cloud

BigQuery, Snowflake, Redshift dhe ClickHouse janë ndërtuar për analiza mbi miliarda rreshta: ruajnë të dhënat sipas kolonave dhe përgjigjen në sekonda për raporte që në PostgreSQL do të zgjatnin orë.

COALESCE & NULL handling

Trajtimi i NULL-it

NULL do të thotë „e panjohur“, prandaj nota = NULL s'funksionon — duhet nota IS NULL. COALESCE(telefoni, 'pa numër') jep vlerë rezervë. Çdo llogaritje me NULL jep NULL.

Composite keys

Çelësat e përbërë

Një çelës i përbërë përdor dy ose më shumë kolona bashkë si identifikues unik — p.sh. (nxenes_id, lenda) te tabela e notave, ku çdo nxënës ka një notë për lëndë.

Connection limits & PgBouncer

Kufiri i lidhjeve dhe PgBouncer

Çdo lidhje me PostgreSQL zë memorie, dhe ka kufi (p.sh. 100). Funksionet serverless mund ta kalojnë shpejt. PgBouncer ose një „pooler“ i ndan pak lidhje reale mes shumë klientëve.

Connection pool

Grup lidhjesh

Hapja e një lidhjeje me databazën kërkon kohë, prandaj aplikacionet mbajnë gati një „pishinë“ me disa lidhje të hapura dhe i ripërdorin. Kështu çdo kërkesë merr menjëherë një lidhje të lirë, në vend që të hapë një të re.

Connection string

Vargu i lidhjes

Connection string-u është një rresht teksti që i tregon programit si të lidhet me databazën: adresën, portën, emrin e përdoruesit, fjalëkalimin dhe emrin e databazës. Përmban sekrete, ndaj mbahet në një variabël mjedisi, jo në kod.

Constraints (NOT NULL, UNIQUE)

Kufizimet në databazë

Kufizimet janë rregulla që databaza i zbaton vetë: NOT NULL (fusha s'mund të jetë bosh), UNIQUE (s'lejohen dy vlera të njëjta, p.sh. email-i), CHECK (p.sh. mosha ≥ 0). Kështu të dhënat e gabuara s'hyjnë fare.

Correlated subqueries

Subquery-t e lidhura

Një subquery e lidhur përdor vlera nga query-ja e jashtme dhe ekzekutohet për çdo rresht — p.sh. „nxënësit me notë mbi mesataren e klasës së tyre“. E fuqishme, por mund të jetë e ngadaltë; shpesh zëvendësohet me JOIN ose window functions.

Covering indexes & index-only scans

Indekset mbuluese

Po indeksi përmban të gjitha kolonat që i duhen query-së, databaza s'ka nevojë fare të lexojë tabelën — shumë më shpejt. Në PostgreSQL shton kolona me INCLUDE.

CREATE TABLE

CREATE TABLE krijon një tabelë të re me kolonat dhe tipet e tyre; ALTER TABLE e ndryshon (shton kolona); DROP TABLE e fshin plotësisht. Këto komanda quhen DDL (Data Definition Language).

CROSS JOIN

CROSS JOIN kombinon çdo rresht të tabelës së parë me çdo rresht të së dytës — 10 madhësi × 5 ngjyra = 50 kombinime. I dobishëm rrallë, por i rrezikshëm po e bën pa dashje (harron kushtin ON).

CRUD

CRUD janë katër veprimet bazë me të dhëna: Create (krijo), Read (lexo), Update (ndrysho) dhe Delete (fshi). Pothuajse çdo aplikacion — nga rrjetet sociale te ditari elektronik — bën kryesisht këto katër gjëra.

CTE (WITH clause)

CTE (klauzola WITH)

Një CTE (WITH emri AS (...)) i jep emër një query-je të ndërmjetme, që query-ja kryesore të lexohet si hapa. Me WITH RECURSIVE përshkon edhe hierarki (si pemë kategorish).

Data integrity

Integriteti i të dhënave

Integriteti do të thotë që të dhënat janë të sakta dhe konsistente: s'ka nxënës pa klasë, nota jashtë 1–10 ose email të dyfishtë. Arrihet me kufizime, çelësa të huaj dhe transaksione — jo vetëm me kontrolle në kod.

Data lakes & lakehouses

Liqenet e të dhënave

Një „data lake“ ruan sasi gjigante të dhënash të papërpunuara (log-e, CSV, Parquet) në S3, të lira. „Lakehouse“ (Delta Lake, Apache Iceberg) shton mbi to tabela, transaksione dhe SQL — si një data warehouse mbi skedarë.

Data modelling in NoSQL

Modelimi i të dhënave në NoSQL

Në NoSQL, të dhënat modelohen sipas mënyrës si lexohen, jo sipas normalizimit: shpesh i fut të dhënat e lidhura brenda dokumentit (embedding) që t'i marrësh me një lexim. DynamoDB çon këtë deri te „single-table design“.

Data quality checks

Kontrollet e cilësisë së të dhënave

Të dhënat e këqija prishin raportet dhe AI-në. Kontrollo rregullisht: vlera që mungojnë, përsëritje, vlera jashtë intervalit, lidhje të prishura. dbt tests dhe Great Expectations i automatizojnë këto kontrolle.

Data retention policies

Politikat e ruajtjes së të dhënave

Sa kohë mbahen të dhënat? Log-et ndoshta 30 ditë, faturat 10 vjet (ligji), llogaritë e fshira 30 ditë. Rregullat e qarta kursejnë hapësirë, ulin rrezikun e rrjedhjeve dhe ndihmojnë me GDPR.

Data warehouse & data lake

Depo të dhënash

Data warehouse-i është një databazë e madhe ku kompania i mbledh të dhënat e pastruara nga shumë burime, për raporte dhe analiza. Data lake-u ruan të dhëna të papërpunuara të çdo lloji, „siç vijnë“, për t'u përdorur më vonë.

Database

Bazë të dhënash

Baza e të dhënave është vendi ku një aplikacion i ruan të dhënat në mënyrë të rregullt dhe të përhershme — përdoruesit, postimet, porositë. Të dhënat mbeten aty edhe kur programi fiket, dhe mund t'i gjesh shpejt kur të duhen.

Database anti-patterns

Gabimet e zakonshme në databaza

Gabime të shpeshta: lista me presje në një kolonë („5,8,9“), tabela gjigante me 200 kolona, modeli EAV (çdo vlerë si rresht), çmime si FLOAT (përdor DECIMAL), dhe data si tekst. Secila sjell probleme më vonë.

Database careers (DBA, data engineer)

Karriera me databaza

Një DBA (administrator databazash) kujdeset për performancën, backup-et, sigurinë dhe përditësimet. Sot shumë nga këto i bën cloud-i, dhe roli shpesh bëhet „data engineer“ ose „platform engineer“. SQL-ja mbetet aftësi e kërkuar kudo.

Database design process

Projektimi i databazës

Si projektohet një databazë: gjej „entitetet“ (nxënës, klasë, notë), vetitë e tyre dhe lidhjet; vizato një diagram ER; normalizo; zgjidh çelësat dhe indekset sipas query-ve që do të bësh më shpesh.

Database diagram tools (dbdiagram, DrawSQL)

Mjetet për diagramet e databazave

dbdiagram.io, DrawSQL dhe ChartDB të lejojnë të vizatosh tabelat dhe lidhjet e databazës me tekst ose tërheqje, dhe disa gjenerojnë edhe SQL-në. Shumë të dobishme për të projektuar dhe shpjeguar skemën.

Database GUI tools

Mjetet grafike për databaza

Mjetet grafike si phpMyAdmin, DBeaver, pgAdmin ose MySQL Workbench të lejojnë t'i shohësh dhe t'i ndryshosh tabelat me klikime, si në Excel, dhe të shkruash query me ndihmë. Shumë të dobishme kur mëson SQL.

Database high availability & failover

Disponueshmëria e lartë e databazës

Për të mos rënë kur bie serveri i databazës, mbahet një kopje „standby“ që merr çdo ndryshim dhe zë vendin automatikisht (failover). Databazat e menaxhuara e bëjnë me një klik; vetë me mjete si Patroni.

Database monitoring

Monitorimi i databazës

Gjërat që duhet ndjekur: query-t e ngadalta, CPU dhe memoria, hapësira në disk, numri i lidhjeve, bllokimet dhe vonesa e replikave. Shumica e rënieve paralajmërohen nga këto shenja orë më parë.

Database naming conventions

Rregullat e emërtimit në databazë

Zakonet më të përhapura: emrat me snake_case (data_lindjes), tabelat në shumës (nxenesit) ose në njëjës — por gjithmonë njësoj; çelësat e huaj si klasa_id; indekset me parashtesë idx_. Shmang fjalët e rezervuara si user ose order.

Database security basics

Siguria e databazës

Mos e hap databazën në internet, krijo përdorues me leje minimale për aplikacionin (jo superuser), enkripto lidhjet, përdor query të parametrizuara dhe ruaj fjalëkalimet e përdoruesve vetëm si hash.

Databases for mobile apps

Databazat për aplikacionet mobile

Aplikacionet mobile ruajnë të dhëna lokalisht që të punojnë edhe pa internet: SQLite (direkt ose përmes Room në Android dhe Core Data/SwiftData në iOS), Realm, WatermelonDB — dhe i sinkronizojnë me serverin kur ka lidhje.

Deadlocks in databases

Bllokimet e ndërsjella në databazë

Transaksioni A kyç rreshtin 1 dhe pret rreshtin 2; B kyç rreshtin 2 dhe pret rreshtin 1 — asnjë s'vazhdon. Databaza e zbulon dhe anulon njërin. Shmangia: kyç rreshtat gjithmonë në të njëjtën renditje dhe mbaji transaksionet të shkurtra.

Denormalization

Denormalizimi

Ndonjëherë, për shpejtësi leximi, i dyfishon të dhënat qëllimisht — p.sh. ruan numrin e komenteve te postimi në vend që t'i numërosh çdo herë. Leximi bëhet më i shpejtë, por duhet kujdes që kopjet të mbeten të sakta.

DISTINCT

SELECT DISTINCT kthen vetëm vlerat unike — p.sh. lista e qyteteve nga ku vijnë nxënësit, pa përsëritje.

Distributed SQL (CockroachDB, Spanner)

SQL i shpërndarë

Databazat „NewSQL“ si CockroachDB, Google Spanner dhe YugabyteDB japin SQL dhe transaksione ACID, por të shpërndara në shumë serverë dhe rajone — kombinojnë sigurinë e SQL-së me shkallëzimin e NoSQL-së.

Document databases

Databazat me dokumente

Databazat me dokumente (MongoDB, Firestore, CouchDB) ruajnë të dhëna si objekte JSON, ku çdo dokument mund të ketë fusha të ndryshme. Fleksibël për të dhëna që ndryshojnë shpesh formë.

Embedded databases (SQLite, DuckDB)

Databazat e integruara

Një databazë e integruar punon brenda programit tënd, pa server më vete — SQLite për aplikacione dhe telefona, DuckDB për analiza të shpejta të skedarëve CSV dhe Parquet.

Encrypting data in databases

Enkriptimi i të dhënave në databazë

Disku i databazës enkriptohet zakonisht nga cloud-i (TDE); për fusha shumë të ndjeshme (numra personalë, të dhëna mjekësore) mund t'i enkriptosh veç e veç në aplikacion, që edhe kush lexon databazën të mos i shohë.

Enums in databases

Enum-et në databazë

Për vlera nga një listë e fiksuar (statusi: 'aktiv', 'pezulluar', 'fshirë') ke tri zgjedhje: një tip ENUM, një kufizim CHECK (status IN (...)), ose një tabelë më vete — më fleksibël kur lista ndryshon.

ER diagram

Diagrami ER

Diagrami ER (entitet–relacion) është një vizatim i databazës: kutitë janë tabelat, vijat tregojnë si lidhen — p.sh. „një klasë ka shumë nxënës“. E vizaton para se t'i krijosh tabelat, që ta kesh planin të qartë.

Estimating database size & growth

Vlerësimi i madhësisë së databazës

Sa do të rritet databaza? Llogarit madhësinë mesatare të një rreshti × rreshtat e rinj në ditë, plus indekset (shpesh sa vetë tabela). Kontrollo me pg_total_relation_size dhe planifiko hapësirën para se të mbushet disku.

ETL (Extract, Transform, Load)

ETL-ja janë tre hapat për t'i lëvizur të dhënat: Extract (i merr nga burimet), Transform (i pastron dhe i rregullon) dhe Load (i ruan në databazën ose warehouse-in e destinacionit).

Eventual consistency

Konsistenca përfundimtare

Në shumë sisteme të shpërndara, një ndryshim s'shfaqet menjëherë kudo, por pas pak çastesh të gjitha kopjet përputhen. P.sh. numri i „pëlqimeve“ mund të ndryshojë pak mes dy pajisjeve për disa sekonda.

EXISTS & NOT EXISTS

EXISTS kontrollon nëse një subquery kthen të paktën një rresht — p.sh. „nxënësit që kanë të paktën një notë 10“. NOT EXISTS gjen të kundërtën: „nxënësit pa asnjë notë“.

EXPLAIN & query plans

EXPLAIN dhe planet e query-ve

EXPLAIN ANALYZE tregon si e ekzekuton databaza një query: a përdor indeks apo lexon gjithë tabelën („seq scan“), dhe sa zgjat çdo hap. Mjeti i parë kur një query është i ngadaltë.

Famous database disasters

Fatkeqësitë e famshme me databaza

Në 2017, një inxhinier i GitLab-it fshiu aksidentalisht databazën e prodhimit — dhe 5 nga 6 metodat e backup-it nuk punonin. Mësimi: backup-et duhen provuar, dhe komandat në prodhim duhen kontrolluar dy herë.

Finding duplicates & gaps

Gjetja e përsëritjeve dhe boshllëqeve

Për të gjetur email-e të përsëritura: GROUP BY email HAVING COUNT(*) > 1. Për të gjetur ditë pa shitje ose numra që mungojnë në një seri, përdor generate_series ose LAG — problemi klasik „gaps and islands“.

Firebase

Firebase-i është një platformë e Google-it që të jep të gatshme databazë, kyçje përdoruesish dhe hostim, pa e ndërtuar vetë backend-in. E zgjedhin shumë fillestarë për aplikacionet e para.

Foreign key

Çelës i jashtëm

Çelësi i jashtëm është një kolonë që tregon te çelësi primar i një tabele tjetër. Kështu lidhen tabelat: p.sh. çdo notë „e di“ cilit nxënës i përket.

From spreadsheet to database

Nga Excel-i te databaza

Excel-i mjafton për pak të dhëna dhe një person. Kur ke shumë përdorues njëherësh, mijëra rreshta, lidhje mes tabelave ose nevojë për leje — është koha për një databazë të vërtetë. Airtable dhe NocoDB janë hap i ndërmjetëm.

Full-text search (Elasticsearch)

Kërkimi i plotë i tekstit

LIKE '%fjalë%' është i ngadaltë dhe s'kupton gabime shkrimi. Kërkimi i plotë i tekstit (PostgreSQL tsvector, Elasticsearch, Meilisearch) indekson fjalët dhe rendit rezultatet sipas përputhjes.

Generated columns & defaults

Kolonat e gjeneruara dhe vlerat fillestare

DEFAULT jep vlerë kur s'jepet asgjë (p.sh. now() për datën). Një kolonë e gjeneruar llogaritet vetë nga kolonat e tjera — p.sh. emri_plote nga emri dhe mbiemri — dhe s'del kurrë jashtë sinkronizimit.

Geospatial data

Të dhënat gjeografike

Për „restorantet brenda 2 km“ duhen tipe dhe indekse të veçanta gjeografike (PostGIS, MongoDB geo), sepse distanca mbi Tokë s'llogaritet si në fletë katrore. GeoJSON është formati standard për t'i shkëmbyer.

GIN, GiST & BRIN indexes

Indekset GIN, GiST dhe BRIN

Përveç B-tree, PostgreSQL ka indekse të specializuara: GIN për JSON, vargje dhe kërkim teksti; GiST për gjeometri dhe intervale; BRIN, shumë i vogël, për tabela gjigante të renditura sipas kohës.

GRANT & database roles

GRANT dhe rolet

GRANT u jep përdoruesve leje (SELECT, INSERT, UPDATE…) mbi tabela të caktuara, REVOKE ua heq. P.sh. një përdorues raportesh mund vetëm të lexojë, kurrë të fshijë.

Graph databases (Neo4j)

Databazat graf

Databazat graf ruajnë nyje dhe lidhje mes tyre — ideale për rrjete sociale („miqtë e miqve“), rekomandime dhe zbulimin e mashtrimeve. Neo4j përdor gjuhën Cypher.

GROUP BY & aggregate functions

Grupim dhe funksione përmbledhëse

GROUP BY i grupon rreshtat që kanë të njëjtën vlerë, dhe funksionet përmbledhëse — COUNT, SUM, AVG, MAX — llogaritin diçka për çdo grup. P.sh. sa nxënës ka çdo klasë, ose mesataren e notave për çdo lëndë.

Grouping by date (day, week, month)

Grupimi sipas datës

Për „regjistrime sipas muajit“, rrumbullakos datën me DATE_TRUNC('month', created_at) (PostgreSQL) ose strftime (SQLite) dhe grupo. Kujdes me zonat kohore — një regjistrim në mesnatë mund të bjerë në muajin e gabuar.

HAVING

WHERE filtron rreshtat para grupimit; HAVING filtron grupet pas tij — p.sh. vetëm klasat me mesatare mbi 8.

How databases store data (pages, B-trees)

Si i ruajnë databazat të dhënat

Nga brenda, databazat i ruajnë të dhënat në „faqe“ (blloqe zakonisht 8 KB) në disk, të organizuara me B-tree për kërkim të shpejtë. Disa (RocksDB, Cassandra) përdorin LSM-tree, që shkruajnë shumë më shpejt.

Importing & exporting CSV

Importi dhe eksporti CSV

Shumë të dhëna vijnë nga Excel si CSV. PostgreSQL i ngarkon shpejt me COPY, MySQL me LOAD DATA, dhe mjetet si DBeaver kanë import/eksport me klikim. Kontrollo kodimin (UTF-8) që ë dhe ç të mos prishen.

IN vs EXISTS vs JOIN

IN, EXISTS apo JOIN?

Për „nxënësit që kanë të paktën një notë“ mund të përdorësh IN (subquery), EXISTS ose JOIN me DISTINCT. Databazat moderne shpesh i optimizojnë njësoj, por NOT IN me NULL jep rezultate befasuese — preferohet NOT EXISTS.

Index (database)

Indeks (databazë)

Indeksi në databazë është një strukturë shtesë që e bën kërkimin në një kolonë shumë më të shpejtë — në vend që databaza t'i kontrollojë të gjitha rreshtat një nga një. Kostoja: pak më shumë hapësirë dhe shkrime pak më të ngadalta.

Index types (B-tree, hash, composite)

Llojet e indekseve

Indeksi më i zakonshëm është B-tree (për =, <, > dhe ORDER BY). Indekset e përbëra mbulojnë disa kolona (renditja ka rëndësi!); GIN shërben për kërkim teksti dhe JSON. Shumë indekse e ngadalësojnë shkrimin.

INNER, LEFT, RIGHT & FULL JOIN

Llojet e JOIN-eve

INNER JOIN mban vetëm rreshtat që kanë çift në të dyja tabelat; LEFT JOIN mban të gjithë nga e majta (me NULL kur s'ka çift); RIGHT JOIN e kundërta; FULL JOIN të gjithë nga të dyja.

INSERT ... SELECT & bulk inserts

INSERT ... SELECT dhe futjet masive

Mund të futësh shumë rreshta njëherësh (VALUES (...), (...), (...)) ose të kopjosh rezultatin e një SELECT-i direkt në një tabelë tjetër. Shumë më shpejt se mijëra INSERT veç e veç.

INSERT, UPDATE, DELETE

Këto janë tri komandat e SQL-së për të ndryshuar të dhënat: INSERT shton rreshta të rinj, UPDATE ndryshon rreshta ekzistues dhe DELETE i fshin. Te UPDATE dhe DELETE mos harro WHERE — përndryshe ndryshon gjithë tabelën!

Isolation levels & locks

Nivelet e izolimit dhe kyçjet

Kur shumë përdorues ndryshojnë të dhënat njëkohësisht, databaza përdor kyçje dhe nivele izolimi (READ COMMITTED, SERIALIZABLE) për të shmangur gabime si „dy blerës blenë sendin e fundit“.

JOIN

Bashkim tabelash

JOIN-i në SQL i bashkon rreshtat nga dy ose më shumë tabela sipas një kolone të përbashkët. Kështu, p.sh., merr në një listë emrin e nxënësit bashkë me notat e tij.

JSON columns in SQL (JSONB)

Kolonat JSON në SQL

PostgreSQL (JSONB) dhe MySQL lejojnë kolona JSON brenda tabelave relacionale — fleksibilitet si te MongoDB pa e lënë SQL-në. Mund të kërkosh brenda tyre me operatorë si ->>.

Key-value stores

Ruajtjet çelës-vlerë

Databaza më e thjeshtë: ruan vlera sipas një çelësi, si një fjalor gjigant. Redis, DynamoDB dhe Memcached janë shumë të shpejta për cache, sesione dhe numërues.

Keys cheat sheet

Përmbledhje e çelësave

Çelësi primar identifikon çdo rresht; çelësi i huaj tregon një rresht në tabelë tjetër; çelësi kandidat është çdo kolonë që mund të ishte primar (p.sh. email-i); çelësi i përbërë përdor disa kolona bashkë.

Keyset (cursor) pagination

Faqosja me kursor

OFFSET 100000 e detyron databazën të lexojë dhe hedhë 100 000 rreshta — gjithnjë e më ngadalë. Faqosja me „kursor“ kujton ID-në e fundit (WHERE id > 1234 LIMIT 20) dhe mbetet e shpejtë në çdo faqe. Kështu punojnë rrjetet sociale.

LAG & LEAD

LAG() merr vlerën e rreshtit të mëparshëm dhe LEAD() të atij pasardhës — p.sh. për të krahasuar shitjet e sotme me ato të djeshme pa JOIN të ndërlikuar.

Learning databases: a roadmap

Si t'i mësosh databazat

Rruga e zakonshme: SELECT, WHERE, ORDER BY → INSERT/UPDATE/DELETE → JOIN-et → GROUP BY → projektimi dhe normalizimi → indekset dhe EXPLAIN → transaksionet → një ORM. Ushtro me SQLBolt, SQLZoo ose LeetCode Database.

LIKE, IN & BETWEEN

LIKE kërkon me model (% = çdo tekst: 'Ar%'), IN kontrollon një listë vlerash, BETWEEN një interval. Të gjitha shkojnë te WHERE.

Many-to-many & junction tables

Lidhjet shumë-me-shumë

Një nxënës ndjek shumë lëndë dhe një lëndë ka shumë nxënës. Kjo zgjidhet me një tabelë të tretë („junction“) — nxenes_lende(nxenes_id, lende_id) — që lidh të dyja.

Materialized views

Pamjet e materializuara

Një view i zakonshëm ekzekuton query-n sa herë e lexon; një view i materializuar e ruan rezultatin si tabelë dhe e rifreskon kur ta kërkosh. Ideal për raporte të rënda që s'duhen të sakta deri në sekondë.

Migration

Migrim

Migrimi është një skedar që përshkruan një ndryshim në strukturën e databazës — p.sh. shtimin e një kolone të re. Migrimet ruhen me radhë, që i gjithë ekipi ta ndryshojë databazën njësoj.

Migration tools (Flyway, Alembic, Prisma Migrate)

Mjetet e migrimeve

Mjetet e migrimeve ruajnë çdo ndryshim të skemës si skedar me radhë (001_krijo_nxenesit.sql…) dhe i zbatojnë automatikisht në çdo databazë — që zhvillimi, testimi dhe prodhimi të kenë të njëjtën strukturë.

MongoDB

MongoDB-ja është databaza NoSQL më e njohur: i ruan të dhënat si dokumente të ngjashme me JSON, jo në tabela. Përdoret shpesh me Node.js, sepse të dhënat duken njësoj si objektet në JavaScript.

MongoDB queries & aggregation

Query-t dhe agregimi në MongoDB

Në MongoDB kërkon me find({ nota: { $gte: 9 } }) dhe për raporte përdor „aggregation pipeline“: një varg hapash si $match (filtro), $group (grupo) dhe $sort — si GROUP BY i SQL-së, por me hapa.

Multi-tenancy

Shumë klientë në një databazë

Aplikacionet SaaS u shërbejnë shumë kompanive (tenants) nga e njëjta databazë. Mënyrat: një kolonë tenant_id në çdo tabelë, një skemë për secilin, ose një databazë për secilin. Gabimi më i rrezikshëm: një klient sheh të dhënat e tjetrit.

MVCC (multi-version concurrency control)

Kontrolli i njëkohshmërisë me versione

MVCC u lejon lexuesve dhe shkruesve të punojnë njëkohësisht pa bllokuar njëri-tjetrin: çdo transaksion sheh një „fotografi“ të të dhënave nga momenti kur filloi. PostgreSQL, MySQL InnoDB dhe Oracle e përdorin.

MySQL

MySQL-i është një databazë relacionale falas dhe shumë e përhapur, sidomos në faqet me PHP dhe WordPress. MariaDB-ja është një version shumë i ngjashëm, i krijuar nga i njëjti autor.

MySQL vs PostgreSQL

MySQL apo PostgreSQL?

Të dyja janë databaza relacionale të shkëlqyera dhe falas. MySQL/MariaDB është shumë e përhapur te hostimet dhe WordPress; PostgreSQL ka më shumë veçori (JSONB, extensions, tipe të avancuara) dhe është zgjedhja e parë për projekte të reja.

Normal forms (1NF, 2NF, 3NF)

Format normale

1NF: çdo qelizë ka një vlerë të vetme (jo „mat, fiz“ në një fushë). 2NF: çdo kolonë varet nga i gjithë çelësi. 3NF: kolonat s'varen nga kolona të tjera jo-çelës. Qëllimi: pa përsëritje dhe pa kontradikta.

Normalization

Normalizim

Normalizimi është mënyra si i organizon tabelat që e njëjta e dhënë të mos përsëritet në shumë vende. P.sh. adresën e klientit e ruan një herë në tabelën e klientëve, jo në çdo porosi. Kështu, kur ndryshon, e ndryshon vetëm në një vend.

NoSQL

NoSQL janë baza të dhënash që nuk i ruajnë të dhënat në tabela me rreshta e kolona, por p.sh. si dokumente të ngjashme me JSON. Janë fleksibile kur të dhënat nuk kanë gjithmonë të njëjtën formë. Shembuj: MongoDB, Firebase.

NULL in SQL

NULL në SQL

NULL në databazë do të thotë „vlerë që mungon“ — jo zero dhe jo tekst bosh. Nuk krahasohet me =, por me IS NULL ose IS NOT NULL.

Offline sync & conflict resolution

Sinkronizimi dhe konfliktet

Kur dy pajisje ndryshojnë të njëjtën gjë offline, cila fiton kur sinkronizohen? „E fundit fiton“ është e thjeshtë por humb të dhëna; CRDT-të (si te Figma dhe Google Docs) i bashkojnë ndryshimet automatikisht.

OLTP vs OLAP

OLTP janë databazat e aplikacioneve: shumë veprime të vogla dhe të shpejta (krijo porosi, ndrysho profilin). OLAP janë për analiza: pak query, por mbi shumë të dhëna („shitjet për rajon në 5 vjet“). Zakonisht janë sisteme të ndara.

ON DELETE CASCADE

Kur fshin një klasë, çfarë ndodh me nxënësit e saj? ON DELETE CASCADE i fshin edhe ata, SET NULL ua heq lidhjen, RESTRICT e ndalon fshirjen. Kështu databaza ruan „integritetin referencial“.

One-to-many & many-to-many

Lidhjet mes tabelave

Tabelat lidhen me njëra-tjetrën në tri mënyra: një-me-një (një person, një pasaportë), një-me-shumë (një klasë, shumë nxënës) dhe shumë-me-shumë (nxënësit dhe lëndët), që kërkon një tabelë të tretë lidhëse.

One-to-one, one-to-many

Lidhjet një-me-një dhe një-me-shumë

Një-me-shumë: një klasë ka shumë nxënës (çelësi i huaj klasa_id te nxënësit). Një-me-një: një përdorues ka një profil. Kjo është lidhja më e zakonshme në databaza.

Optimistic vs pessimistic locking

Kyçja optimiste dhe pesimiste

Pesimiste: kyç rreshtin ndërsa e ndryshon (SELECT ... FOR UPDATE). Optimiste: mos kyç, por kontrollo një kolonë „version“ kur ruan — po e kishte ndryshuar dikush tjetër, provo sërish.

ORDER BY & LIMIT

ORDER BY rendit rezultatet (ASC rritëse, DESC zbritëse) dhe LIMIT kufizon sa rreshta kthehen. Bashkë japin „top 10“ ose faqosje me OFFSET.

ORM

ORM-ja të lejon të punosh me databazën duke përdorur klasat dhe objektet e gjuhës tënde, në vend që ta shkruash SQL-në me dorë. ORM-ja e përkthen vetë kodin tënd në SQL.

Parameterized queries in every language

Query-t e parametrizuara në çdo gjuhë

Çdo gjuhë ka mënyrën e vet për parametra: ? në SQLite/MySQL/Java, $1 në PostgreSQL, :emri në PDO/SQLAlchemy, @emri në C#. Rregulli është i njëjtë kudo: mos e bashko kurrë tekstin e përdoruesit në SQL.

Partial indexes

Indekset e pjesshme

Një indeks i pjesshëm mbulon vetëm rreshtat që të interesojnë — p.sh. vetëm porositë „e papaguar“ — kështu është shumë më i vogël dhe më i shpejtë. Mund të garantojë edhe unicitet vetëm për rreshtat aktivë.

Pivoting data in SQL

Kthimi i rreshtave në kolona

Për ta kthyer një tabelë „të gjatë“ (nxënës, lëndë, notë) në një „të gjerë“ (një kolonë për çdo lëndë), përdor SUM(CASE WHEN ...) — si tabelat pivot të Excel-it.

Polymorphic associations

Lidhjet polimorfike

Kur komentet mund t'i përkasin postimeve, fotove ose videove, disa ORM (Laravel, Rails) përdorin dy kolona: koment_lloji dhe koment_id. Praktike, por databaza s'mund ta garantojë lidhjen me çelës të huaj.

PostgreSQL

PostgreSQL-i (ose „Postgres“) është një nga databazat relacionale më të fuqishme dhe më të njohura, falas dhe open source. Përdoret nga startup-et deri te kompanitë e mëdha.

PostgreSQL extensions (PostGIS, pgvector)

Shtesat e PostgreSQL

PostgreSQL zgjerohet me „extensions“: PostGIS për harta dhe vendndodhje, pgvector për embedding-e AI, TimescaleDB për seri kohore, pg_trgm për kërkim me gabime shkrimi. Prandaj quhet „thika zvicerane“ e databazave.

Practising SQL (SQLBolt, LeetCode, Mode)

Ushtrimi i SQL-së

Faqe falas për të ushtruar SQL: SQLBolt (mësime interaktive), SQLZoo, pgexercises.com (PostgreSQL), LeetCode Database dhe HackerRank SQL. SQL-ja mësohet duke shkruar query, jo duke lexuar.

Prepared statement

Query me parametra

Prepared statement do të thotë që query-n e shkruan me vende bosh (? ose %s), dhe vlerat e përdoruesit i jep veçmas. Databaza s'i ngatërron kurrë me kodin — kjo është mbrojtja kryesore kundër SQL injection.

Primary key

Çelës primar

Çelësi primar është një kolonë që e identifikon çdo rresht në mënyrë unike — zakonisht një „id“. Dy rreshta nuk mund ta kenë kurrë të njëjtin çelës primar.

Prisma ORM

Prisma është ORM-i më i njohur në TypeScript: përshkruan tabelat në schema.prisma, dhe gjeneron një klient me tipe të plota dhe migrime automatike. prisma.nxenes.findMany({ where: { nota: { gte: 9 } } }).

Query

Query-ja është një pyetje ose urdhër që i dërgon bazës së të dhënave, zakonisht në SQL. Me të kërkon të dhëna sipas kushteve, i rendit ose i ndryshon.

Query builders (Knex, Kysely, jOOQ)

Ndërtuesit e query-ve

Query builder-at janë mesi mes SQL-së së pastër dhe ORM-së: ndërton query me metoda në kod (db.select().from('nxenesit').where(...)), me parametra të sigurt, por pa magjinë e ORM-së.

Query optimization (EXPLAIN)

Optimizimi i query-ve

Optimizimi i query-ve është puna për t'i bërë kërkesat në databazë më të shpejta: shton indekse, merr vetëm kolonat që të duhen, shmang SELECT * në tabela të mëdha. Me EXPLAIN sheh si e ekzekuton databaza query-n tënde.

Query planner & table statistics

Planifikuesi i query-ve

Databaza vendos si të ekzekutojë një query (cilin indeks, cilin JOIN) bazuar në statistikat për tabelat. Po statistikat janë të vjetra, zgjedh plane të këqija — ANALYZE i përditëson.

Read replicas

Kopjet vetëm për lexim

Databaza kryesore pranon shkrimet, dhe disa kopje („replica“) marrin ndryshimet dhe u shërbejnë leximeve. Kështu përballon shumë më tepër përdorues — por kopjet mund të jenë pak sekonda prapa.

Redis

Redis-i është një databazë shumë e shpejtë që i mban të dhënat në memorie (RAM), në formë çelës–vlerë. Përdoret kryesisht si cache, për seanca dhe për numërues që ndryshojnë shpesh.

Redis data types & uses

Tipet e të dhënave në Redis

Redis s'ka vetëm çelës-vlerë: ka lista (radhë), sete, sorted sets (renditje — p.sh. tabela e pikëve), hash-e, streams dhe pub/sub. Përdoret për cache, sesione, kufizim kërkesash dhe renditje në kohë reale.

Relational algebra & set theory

Algjebra relacionale

Databazat relacionale bazohen te teoria e E. F. Codd (1970): tabelat janë „relacione“ (bashkësi rreshtash) dhe query-t janë veprime matematikore — zgjedhje, projeksion, bashkim, union. Kjo e bën SQL-në kaq të qëndrueshme.

Relational database

Databazë relacionale

Databaza relacionale i ruan të dhënat në tabela që lidhen me njëra-tjetrën përmes çelësave — p.sh. tabela e nxënësve dhe tabela e notave. Me të punon me SQL. Shembuj: PostgreSQL, MySQL, SQLite.

Replication & sharding

Replikim dhe ndarje

Replikimi mban disa kopje të njëjta të databazës në serverë të ndryshëm, që nëse bie njëri, të punojnë të tjerët. Sharding-u e ndan databazën në pjesë — p.sh. përdoruesit A–M në një server, N–Z në një tjetër — që të përballojë shumë të dhëna.

RETURNING & OUTPUT

INSERT ... RETURNING id (PostgreSQL, SQLite) kthen menjëherë rreshtin e krijuar ose ndryshuar — p.sh. ID-në e re — pa bërë një SELECT tjetër. SQL Server ka OUTPUT, MySQL LAST_INSERT_ID().

Row vs columnar storage

Ruajtja sipas rreshtave dhe kolonave

Databazat e zakonshme ruajnë rresht pas rreshti (të shpejta për të lexuar një rekord të plotë). Ato kolonare ruajnë kolonë pas kolone — shumë më të shpejta për „mesatarja e të gjitha notave“, sepse lexojnë vetëm atë kolonë.

Row-level security (RLS)

Siguria në nivel rreshti

Me RLS, vetë databaza vendos cilët rreshta mund të shohë çdo përdorues — p.sh. „çdo nxënës sheh vetëm notat e veta“ — edhe nëse aplikacioni harron kontrollin. Supabase mbështetet fort te RLS.

Rows & columns

Rreshtat dhe kolonat

Në një tabelë, çdo rresht (record) është një send — p.sh. një nxënës — dhe çdo kolonë (field) është një veti e tij: emri, mosha, klasa. Të gjithë rreshtat kanë të njëjtat kolona.

Running databases in Docker

Databazat në Docker

Për zhvillim, mënyra më e lehtë për të pasur PostgreSQL, MySQL ose Redis është një kontejner Docker — niset me një komandë, pa instalim dhe njësoj për të gjithë ekipin. Përdor një volume që të dhënat të mos humbin.

Running totals & moving averages

Totalet kumulative dhe mesataret lëvizëse

Me SUM(...) OVER (ORDER BY data) llogarit totalin kumulativ (shitjet deri në atë ditë), dhe me ROWS BETWEEN 6 PRECEDING AND CURRENT ROW mesataren e 7 ditëve të fundit. Shumë e përdorur në raporte.

Sample databases to learn with

Databazat shembull për të mësuar

Databaza të gatshme me të dhëna realiste për të ushtruar: Northwind (shitje), Sakila (dyqan filmash), Chinook (muzikë), dhe dataset-e falas nga Kaggle ose INSTAT që i ngarkon vetë.

Savepoints & nested transactions

Pikat e ruajtjes në transaksione

Brenda një transaksioni mund të vendosësh „pika ruajtjeje“ (SAVEPOINT) dhe të kthehesh vetëm te njëra prej tyre po dështon një hap, pa anuluar gjithë transaksionin.

Schema

Skemë

Skema është plani i bazës së të dhënave: cilat tabela ka, çfarë kolonash ka secila, të çfarë tipi janë dhe si lidhen me njëra-tjetrën. E vendos para se të fillosh të ruash të dhëna.

Schema evolution

Evolucioni i skemës

Skema ndryshon gjatë jetës së aplikacionit. Ndryshimet e sigurta: shto kolona (me vlerë fillestare), krijo indekse CONCURRENTLY. Të rrezikshmet: riemërtimi ose fshirja e kolonave që i përdor ende kodi — bëji në disa hapa.

Search engines as databases (Elasticsearch, OpenSearch)

Motorët e kërkimit si databaza

Elasticsearch dhe OpenSearch ruajnë dokumente me një „indeks të përmbysur“ (fjala → dokumentet) që gjen tekste shumë shpejt dhe i rendit sipas rëndësisë. Zakonisht përdoren pranë databazës kryesore, jo në vend të saj.

Seed data

Të dhëna fillestare

Seed data janë të dhëna shembull që i fut në databazë në fillim — p.sh. disa përdorues dhe produkte testi — që aplikacioni të mos jetë bosh kur e zhvillon ose e teston.

Seeding & test databases

Të dhënat e provës dhe databazat për teste

Për zhvillim dhe teste, krijo databaza me të dhëna të rreme por realiste (me Faker ose factories), që çdo zhvillues të ketë të njëjtën pikënisje. Mos përdor kurrë të dhëna reale të klientëve në kompjuterin tënd.

SELECT

SELECT është komanda e SQL-së për të lexuar të dhëna nga një tabelë. Zgjedh cilat kolona do (ose * për të gjitha) dhe nga cila tabelë; pastaj mund të shtosh WHERE, ORDER BY e të tjera.

Self joins & hierarchies

Bashkimi i tabelës me vetveten

Një tabelë mund të bashkohet me veten — p.sh. punonjësit dhe menaxherët e tyre janë në të njëjtën tabelë (menaxher_id tregon një rresht tjetër). Për hierarki të thella përdoret WITH RECURSIVE.

Separate database users per app

Përdoruesit e veçantë të databazës

Mos e lidh aplikacionin me përdoruesin „postgres“ ose „root“. Krijo përdorues të veçantë: një për aplikacionin (vetëm leximi/shkrimi i tabelave të veta), një vetëm-lexim për raportet, një për migrimet.

Serverless Postgres & branching

PostgreSQL serverless dhe degët

Neon dhe Supabase lejojnë „degë“ të databazës si në Git: krijon në sekonda një kopje të plotë të databazës për çdo pull request, e teston dhe e fshin. Ndryshon mënyrën si testohen migrimet.

Slow query log & pg_stat_statements

Regjistri i query-ve të ngadalta

Databazat mund të regjistrojnë çdo query që zgjat më shumë se X milisekonda. pg_stat_statements në PostgreSQL tregon cilat query zënë më shumë kohë gjithsej — vendi i parë ku fillon optimizimin.

Soft delete

Fshirje e butë

Soft delete do të thotë që një rresht nuk fshihet vërtet, por shënohet si i fshirë — p.sh. me një kolonë deleted_at. Kështu mund ta rikthesh nëse dikush e fshiu gabimisht, dhe historia mbetet.

Spotting slow ORM queries

Gjetja e query-ve të ngadalta të ORM-së

ORM-të fshehin SQL-në, prandaj shpesh s'e vë re që një faqe bën 200 query. Aktivizo log-et e SQL-së gjatë zhvillimit, numëro query-t për kërkesë dhe përdor „eager loading“ për të dhënat e lidhura.

Spreadsheet (Excel)

Fletëllogaritëse

Fletëllogaritësja (Excel, Google Sheets) është një tabelë me qeliza ku shkruan të dhëna dhe formula që llogaritin vetë — p.sh. =AVERAGE(B2:B10). Shpesh është „databaza“ e parë që përdorin njerëzit, dhe një hap i mirë drejt programimit.

SQL

SQL-ja është gjuha me të cilën „flet“ me bazat e të dhënave: kërkon, shton, ndryshon dhe fshin të dhëna. Komandat lexohen pothuajse si fjali në anglisht: SELECT, INSERT, UPDATE, DELETE.

SQL clients (DBeaver, TablePlus, psql)

Programet për databaza

Për të parë dhe ndryshuar databazën: DBeaver (falas, për çdo databazë), TablePlus, DataGrip, pgAdmin, ose terminali — psql për PostgreSQL, mysql për MySQL, sqlite3 për SQLite.

SQL data types

Tipet e të dhënave në SQL

Çdo kolonë në një tabelë ka tip: INTEGER për numra të plotë, VARCHAR ose TEXT për tekst, DECIMAL për para, BOOLEAN për po/jo, DATE dhe TIMESTAMP për data. Tipi i duhur i mban të dhënat të sakta dhe databazën të shpejtë.

SQL dialects (PostgreSQL vs MySQL vs SQLite)

Dialektet e SQL-së

Bazat e SQL-së janë të njëjta kudo, por çdo databazë ka dallime: LIMIT kundrejt TOP (SQL Server), SERIAL kundrejt AUTO_INCREMENT, funksione të ndryshme datash. T-SQL (Microsoft) dhe PL/SQL (Oracle) shtojnë programim procedural.

SQL injection with ORMs

SQL injection edhe me ORM

ORM-të mbrojnë nga SQL injection — derisa përdor query të papërpunuara (raw) me tekst të bashkuar, ose emra kolonash nga përdoruesi (p.sh. ORDER BY ${kolona}). Për renditje dinamike, lejo vetëm emra nga një listë.

SQL order of execution

Rendi i ekzekutimit të SQL-së

SQL shkruhet SELECT … FROM … WHERE …, por ekzekutohet në rend tjetër: FROM/JOIN → WHERE → GROUP BY → HAVING → SELECT → ORDER BY → LIMIT. Prandaj s'mund të përdorësh një alias të SELECT-it brenda WHERE.

SQL Server & Oracle

Microsoft SQL Server dhe Oracle janë databaza komerciale shumë të përdorura në banka, telekom dhe institucione shtetërore — shpesh të kërkuara në punët e rajonit, sidomos me .NET (SQL Server) dhe Java (Oracle).

SQL string & date functions

Funksionet e teksteve dhe datave në SQL

SQL ka funksione për tekste (CONCAT, LOWER, UPPER, LENGTH, TRIM) dhe për data (NOW(), EXTRACT(YEAR FROM ...), DATE_TRUNC). Emrat ndryshojnë pak mes PostgreSQL, MySQL dhe SQLite.

SQL vs NoSQL: how to choose

SQL apo NoSQL?

Për shumicën e aplikacioneve, një databazë relacionale (PostgreSQL) është zgjedhja më e sigurt: transaksione, JOIN-e, kufizime. NoSQL ia vlen për raste specifike: shkallëzim gjigant, të dhëna pa strukturë fikse, cache, grafe ose seri kohore.

SQLAlchemy & Django ORM

Në Python, SQLAlchemy është libraria më e fuqishme për databaza (me Alembic për migrime), dhe Django ka ORM-in e vet të integruar: Nxenes.objects.filter(nota__gte=9).

SQLite

SQLite-i është një databazë e vogël që ruhet e gjitha në një skedar të vetëm, pa server. Vjen e gatshme me Python-in dhe përdoret në çdo telefon — ideale për të mësuar SQL dhe për projekte të vogla.

SQLite in production

SQLite në prodhim

SQLite s'është vetëm për prova: me WAL mode dhe mjete si Litestream (backup i vazhdueshëm në S3), fuqizon edhe faqe me shumë trafik. Ideal kur ke një server të vetëm — pa server databaze, pa vonesë rrjeti.

Stored procedure

Procedurë e ruajtur

Stored procedure është një grup komandash SQL i ruajtur brenda databazës me një emër, që e thërret kur të duash — si një funksion që jeton në databazë. Përdoret shpesh në sisteme të mëdha bankare dhe në SQL Server.

Storing dates & time zones

Ruajtja e datave në databazë

Ruaji datat gjithmonë në UTC (në PostgreSQL me TIMESTAMPTZ) dhe ktheji në orën lokale vetëm kur i shfaq. Shto kolonat created_at dhe updated_at në çdo tabelë — do të të duhen.

Storing money correctly

Ruajtja e saktë e parave

Mos i ruaj kurrë paratë si FLOAT — 0.1 + 0.2 s'është 0.3! Përdor DECIMAL/NUMERIC(12, 2) ose ruaji si numër të plotë centësh (1999 = 19,99 €), dhe ruaj edhe valutën.

String aggregation (STRING_AGG, GROUP_CONCAT)

Bashkimi i teksteve në grup

STRING_AGG (PostgreSQL, SQL Server) dhe GROUP_CONCAT (MySQL, SQLite) bashkojnë vlerat e një grupi në një tekst — p.sh. emrat e të gjithë nxënësve të një klase, të ndarë me presje.

Subquery

Nënquery

Subquery është një query brenda një query tjetër, në kllapa. P.sh. së pari gjen notën mesatare, pastaj zgjedh nxënësit mbi atë mesatare — gjithçka në një komandë të vetme.

Supabase

Supabase-i është një shërbim që të jep një databazë PostgreSQL gati në cloud, bashkë me login, ruajtje skedarësh dhe API të krijuar automatikisht. Shpesh quhet alternativa me burim të hapur e Firebase-it.

Surrogate vs natural keys

Çelësat artificialë dhe natyralë

Një çelës natyral vjen nga bota reale (numri personal, email-i); një artificial (surrogate) është ID pa kuptim (1, 2, 3 ose UUID). Zakonisht përdoret artificiali si çelës primar, sepse të dhënat reale mund të ndryshojnë.

Table

Tabelë

Tabela është vendi ku baza e të dhënave i ruan të dhënat, me rreshta dhe kolona si në Excel. Çdo rresht është një regjistrim (p.sh. një nxënës), çdo kolonë një e dhënë (emri, mosha, klasa).

Table partitioning

Ndarja e tabelave

Një tabelë gjigante (p.sh. log-e për 5 vjet) ndahet në pjesë sipas një kolone — p.sh. një pjesë për çdo muaj. Query-t për muajin aktual lexojnë vetëm pjesën e vet dhe fshirja e të dhënave të vjetra bëhet e lehtë.

Temporal tables & time travel

Tabelat kohore

Disa databaza (SQL Server, MariaDB, Snowflake) mbajnë vetë historinë e çdo rreshti, kështu mund të pyesësh „si dukej kjo tabelë më 1 mars?“ me FOR SYSTEM_TIME AS OF. Ideal për auditim dhe rikuperim gabimesh.

Temporary tables

Tabelat e përkohshme

Një tabelë e përkohshme ekziston vetëm gjatë lidhjes ose transaksionit dhe pastaj zhduket. E dobishme për të ruajtur rezultate të ndërmjetme gjatë raporteve të ndërlikuara ose importeve.

Testing database restores

Provimi i rikthimit të databazës

Backup-i që s'është provuar s'ekziston. Rregullisht rikthe backup-in në një databazë prove, kontrollo që të dhënat janë aty dhe mat sa zgjat — kjo është RTO-ja jote reale.

Text-to-SQL & AI with databases

AI që shkruan SQL

LLM-të mund të kthejnë një pyetje („sa nxënës kaluan matematikën?“) në SQL. E dobishme për analiza të shpejta, por kontrolloje gjithmonë query-n dhe jepi AI-së vetëm qasje leximi — kurrë DELETE në prodhim.

Time-series databases

Databazat e serive kohore

Optimizuara për të dhëna me kohë: temperatura çdo minutë, çmime aksionesh, metrika serverësh. TimescaleDB (mbi PostgreSQL) dhe InfluxDB ngjeshin dhe llogaritin shumë shpejt mbi intervale kohore.

Top-N per group

N të parët për çdo grup

„Tre nxënësit më të mirë në çdo klasë“ është pyetje klasike: përdor ROW_NUMBER() OVER (PARTITION BY klasa ORDER BY nota DESC) dhe mbaj ata me numër ≤ 3.

Transaction

Transaksion

Transaksioni është një grup veprimesh në databazë që ose kryhen të gjitha, ose asnjë. Nëse diçka dështon në mes, gjithçka kthehet mbrapsht (rollback), që të dhënat të mos mbeten gjysmake.

Trigger

Trigger (shkrepës)

Trigger-i është kod që databaza e ekzekuton vetë kur ndodh diçka në një tabelë — p.sh. pas çdo INSERT ose para çdo UPDATE. Përdoret për t'i mbajtur shënim ndryshimet ose për të përditësuar tabela të tjera.

UNION (SQL)

UNION bashkon rezultatet e dy query-ve në një listë (dhe heq përsëritjet); UNION ALL i mban të gjitha. Të dyja query-të duhet të kenë të njëjtat kolona.

UNIQUE & CHECK constraints

Kufizimet UNIQUE dhe CHECK

UNIQUE ndalon dy rreshta me të njëjtën vlerë (p.sh. email), CHECK kërkon që vlera të plotësojë një kusht (nota 1–10), NOT NULL ndalon vlerat bosh. Databaza i zbaton edhe kur kodi gabon.

UPDATE & DELETE without WHERE

UPDATE dhe DELETE pa WHERE

UPDATE nxenesit SET nota = 10; pa WHERE ndryshon çdo rresht të tabelës! Gabimi klasik që të gjithë e bëjnë një herë. Para se ta ekzekutosh, provo të njëjtin WHERE me SELECT, ose punoji brenda një transaksioni.

Upgrading database versions

Përditësimi i versionit të databazës

Përditësimet e mëdha (PostgreSQL 15 → 17) duhen planifikuar: lexo shënimet e ndryshimeve, provoji në kopje, bëj backup, dhe përdor pg_upgrade ose replikim logjik për ndërprerje minimale.

Upsert (INSERT ... ON CONFLICT)

Upsert do të thotë „shto po s'ekziston, përditëso po ekziston“ — në një komandë të vetme. PostgreSQL: ON CONFLICT DO UPDATE; MySQL: ON DUPLICATE KEY UPDATE.

User-defined functions (PL/pgSQL)

Funksionet në databazë

Databazat të lejojnë të shkruash funksione dhe procedura brenda tyre (PL/pgSQL, T-SQL). Të dobishme për logjikë që duhet të jetë afër të dhënave, por e vështirë për t'u testuar dhe versionuar — shumë ekipe e mbajnë logjikën në aplikacion.

UUID vs auto-increment IDs

UUID kundrejt ID-ve me radhë

ID-të me radhë (1, 2, 3) janë të vogla dhe të shpejta, por zbulojnë sa përdorues ke dhe lejojnë hamendësim. UUID-të janë unike globalisht dhe të pamundura për t'u hamendësuar; UUIDv7 dhe ULID ruajnë edhe renditjen kohore.

VACUUM & table bloat

VACUUM dhe fryrja e tabelave

Në PostgreSQL, rreshtat e fshirë ose të ndryshuar s'zhduken menjëherë — mbeten si „mbeturina“ derisa VACUUM t'i pastrojë. Autovacuum e bën vetë, por në tabela me shumë ndryshime duhet ndjekur.

Vector database

Databazë vektoriale

Databaza vektoriale ruan embedding-e — lista numrash që përfaqësojnë kuptimin e tekstit ose imazheve — dhe gjen shpejt ato më të ngjashmet. Është zemra e RAG-ut: i ndihmon chatbot-et të gjejnë dokumentet e duhura para se të përgjigjen.

Vector search in databases

Kërkimi me vektorë në databaza

Për AI dhe kërkim semantik, databazat ruajnë „vektorë“ (embedding-e) dhe gjejnë më të ngjashmit me indekse të veçanta (HNSW). pgvector, Pinecone, Qdrant dhe Weaviate janë zgjedhjet më të zakonshme.

View

Pamje (view)

Një view është një query i ruajtur me emër, që e përdor si të ishte tabelë. S'i ruan vetë të dhënat — sa herë e lexon, e ekzekuton query-n — por ta thjeshton punën dhe të lejon t'u tregosh të tjerëve vetëm disa kolona.

When indexes don't help

Kur indekset s'ndihmojnë

Indeksi s'përdoret kur query-ja kthen shumicën e rreshtave, kur kolona ka pak vlera të ndryshme (p.sh. gjinia), ose kur mbështjell kolonën me funksion (WHERE LOWER(email) = ...). Atëherë duhet një indeks mbi shprehjen.

WHERE & ORDER BY

Filtrimi dhe renditja në SQL

WHERE i filtron rreshtat — merr vetëm ata që plotësojnë një kusht — dhe ORDER BY i rendit rezultatet, p.sh. nga nota më e lartë te më e ulëta. Bashkë me LIMIT, janë pjesët më të përdorura të një query.

Wide-column stores (Cassandra, DynamoDB)

Databazat me kolona të gjera

Cassandra, ScyllaDB dhe DynamoDB shkruajnë miliona rreshta në sekondë mbi shumë serverë. Zgjedhja e „partition key“ është gjithçka: përcakton si shpërndahen të dhënat dhe cilat query janë të mundshme.

Window functions (ROW_NUMBER, RANK)

Funksionet e dritares

Funksionet e dritares llogaritin mbi një grup rreshtash pa i bashkuar në një: ROW_NUMBER() OVER (PARTITION BY klasa ORDER BY nota DESC) jep renditjen e çdo nxënësi brenda klasës së vet.

Write-ahead log (WAL)

Regjistri i shkrimit paraprak

Para se të ndryshojë të dhënat, databaza e shkruan ndryshimin në një regjistër (WAL). Po fiket papritur, e rindërton gjithçka nga ky regjistër — kështu siguron „durability“ te ACID. Replikimi dhe CDC e përdorin po ashtu.

Writing readable SQL

Shkrimi i SQL-së së lexueshme

Fjalët kyçe me shkronja të mëdha, çdo klauzolë në rresht të ri, alias-e kuptimplote (jo a, b, c), CTE në vend të subquery-ve të ndërthurura, dhe komente për logjikën e ndërlikuar. sqlfluff e formaton automatikisht.