Ugrás a tartalomhoz

data integration

A Wikiszótárból, a nyitott szótárból

Angol


Főnév

data integration (tsz. data integrations)

  1. (informatika, mesterséges intelligencia) A data integration, vagy magyarul adatintegráció, egy olyan folyamat, amely során különböző forrásokból származó adatokat egyesítünk és egységes formában tesszük elérhetővé. Az adatintegráció célja, hogy a szervezetek teljesebb képet kapjanak adataikról, és hatékonyabban használják fel azokat elemzéshez, döntéshozatalhoz vagy automatizáláshoz.


🧩 Miért fontos?

  • A szervezetek gyakran többféle adatforrást használnak: adatbázisok, fájlok, API-k, felhőszolgáltatások.
  • Az adatok sokszor eltérő formátumban, struktúrában vagy minőségben léteznek.
  • Adatintegrációval összehangolható ezek használata, így elkerülhető az adat-szigetek kialakulása.


🔧 Fő lépések az adatintegrációban

  1. Adatkinyerés (Extraction)
    • Adatok begyűjtése a különböző forrásokból (pl. SQL, CSV, REST API, szenzorok).
  2. Adattisztítás (Cleaning)
    • Hiányzó értékek kezelése, duplikátumok eltávolítása, formátumok egységesítése.
  3. Átalakítás (Transformation)
    • Adatok közös struktúrába rendezése (pl. dátumformátum egységesítése, mértékegységek konvertálása).
  4. Összefésülés (Matching & Mapping)
    • Kulcsok (azonosítók) alapján azonos entitások összekapcsolása.
  5. Betöltés (Loading)
    • Az integrált adat betöltése egy közös célrendszerbe (pl. adattárház, dashboard).


🧠 Adatintegrációs módszerek

  • ETL (Extract, Transform, Load) – Adatok először átalakulnak, majd betöltődnek.
  • ELT (Extract, Load, Transform) – Adatok betöltődnek, majd a célrendszer végzi az átalakítást.
  • Adatvirtualizáció – Adatok fizikailag nem kerülnek egybe, csak logikailag lekérdezhetők közösen.
  • Middleware alapú integráció – Alkalmazásréteg-köztes szoftver (pl. ESB) segítségével


🔗 Tipikus források

  • Relációs adatbázisok (pl. MySQL, PostgreSQL)
  • NoSQL adatbázisok (MongoDB, Cassandra)
  • ERP, CRM rendszerek (SAP, Salesforce)
  • Fájlrendszerek (CSV, Excel, JSON)
  • Webes API-k és streaming adatok (pl. IoT eszközök)


📦 Adatintegrációs eszközök (példák)

  • Talend, Informatica, Apache NiFi, Microsoft SSIS
  • Airbyte, Fivetran, Stitch – modern adatmozgató szolgáltatások
  • dbt, Snowflake, BigQuery – felhőalapú adattranszformáció


✅ Előnyök

  • Teljesebb, átláthatóbb információ a szervezet számára
  • Hatékonyabb üzleti intelligencia és elemzés
  • Konzisztens adathasználat különböző rendszerek között
  • Jobb adatminőség és pontosság


❌ Kihívások

  • Adatformátumok és struktúrák eltérése
  • Adatminőség problémák (hiányos, hibás, duplikált adatok)
  • Valós idejű integráció nehézsége
  • Skálázás és teljesítményproblémák nagy adatmennyiség esetén
  • Adatbiztonság és adatvédelmi megfelelés (pl. GDPR)


🧾 Összefoglalás

A data integration a modern adatvezérelt világ egyik alapköve: lehetővé teszi, hogy a szervezetek különböző rendszereiből származó adatokat egységes, használható formában lássák és elemezzék. Az adatintegrációs folyamatok kulcsszerepet játszanak üzleti intelligenciában, gépi tanulásban, döntéstámogatásban, és szinte minden adatintenzív alkalmazásban.


További információk

A lap eredeti címe: „https://hu.wiktionary.org/w/index.php?title=data_integration&oldid=3497510”