Özel ETL'ler ve Veri Taşıma Araçları

KDRM, veritabanları, API’ler, dosyalar, bulut platformları, kurumsal sistemler ve mekansal ortamlar arasında verilerin güvenilir şekilde taşınmasına ihtiyaç duyan kuruluşlar için özel ETL, veri geçişi, denetim ve mutabakat araçları tasarlar ve oluşturur. İstemci ortamına, veri hacmine, dönüşümlerin karmaşıklığına ve gereken otomasyon düzeyine bağlı olarak FME, Alteryx, Python, SQL, ArcPy ve diğer özel geliştirilmiş araçları kullanıyoruz.

Bu araçlar hem tek seferlik geçiş programları hem de tekrarlanabilir operasyonel iş akışları için kullanılır. Bazı durumlarda gereksinim, bir platformdan diğerine büyük bir geçiştir. Diğer durumlarda gereksinim, DEV, UAT, aşamalandırma ve PROD gibi kurumsal ortamlar arasında içerik ve hizmetlerin sürekli tanıtımını tam izlenebilirlik, doğrulama ve geri alma planlamasıyla desteklemektir.

Ürünün desteklediği şeyler

• Mekansal ve mekansal olmayan verilerin çıkarılması, dönüştürülmesi, doğrulanması, mutabakatı ve yüklenmesi.
• Eski ve hedef veri modelleri arasında şema eşleme ve dönüşüm mantığı.
• Özellik sınıflarının, tabloların, hizmetlerin, web haritalarının, belgelerin ve ilgili yapılandırmanın otomatik olarak taşınması.
• Özellik sınıfları, özellik hizmetleri, harita hizmetleri, web haritaları ve diğer GIS içeriği için veri kalitesi denetimi.
• Kontrollü teslimatı ve devir teslimi desteklemek için istisna raporlama, iyileştirme çalışma listeleri ve geçiş denetim yolları.
• Uzun süre çalışan programlar için planlanmış ETL işleri, toplu geçiş işlemleri ve operasyonel destek araçları.

ArcMap’ten ArcGIS Pro’ya geçiş otomasyonu

KDRM, ArcMap harita belgelerinin ArcGIS Pro projelerine geçişini otomatikleştirmek için Python odaklı geçiş araçlarını geliştirdi. Araç envanterlerimiz MXD dosyalarını depolar, bunları APRX projelerine dönüştürür, geçiş sonuçlarını doğrular ve geçiş sonuçları, istisnalar, veri kaynağı sorunları, bozuk katmanlar ve manuel iyileştirme gerektiren öğeler hakkında raporlar üretir.

Bu yaklaşımı birden fazla istemci için yüzlerce ArcMap harita belgesini taşımak için kullandık. Bu tür takımların değeri sadece hız değildir. Aynı zamanda tekrarlanabilirlik, denetlenebilirlik, kalite güvencesi ve nelerin başarılı bir şekilde taşındığına, nelerin başarısız olduğuna ve nelerin hâlâ manuel takip gerektirdiğine ilişkin savunulabilir bir kayıt sağlar.

Kurumsal ortam geçişi ve tanıtımı

Harita hizmetlerinin, özellik hizmetlerinin ve ilgili web haritalama içeriğinin kurumsal ortamlar arasında otomatik olarak taşınması ve tanıtılması için de araçlar geliştirdik. Buna DEV, UAT ve PROD gibi ortamlar arasındaki kontrollü hareketin yanı sıra hizmetlerin, bağımlılıkların ve yapılandırmanın tanıtımdan sonra geçerli kaldığını doğrulamak için gereken destekleyici kontroller de dahildir.

KDRM, büyük istemci ortamlarında yüzlerce web haritasını ve özellik hizmetini çok kısa bir zaman diliminde birden fazla kurumsal ortama taşımak için otomatik geçiş araçlarını kullandı. Ayrıca, onaylı hizmet katmanlarını doğrudan yönetilen veri depolarına ve API’lere bağlayarak gereksiz yeniden yayınlama darboğazlarını azaltan veya ortadan kaldıran yaklaşımlar da geliştirdik; bu, uzun vadeli operasyonel tasarımın daha iyi olduğu durumlarda.

Denetim ve kalite güvence araçları

Geçiş araçlarına ek olarak KDRM, özellik sınıflarını, özellik hizmetlerini, harita hizmetlerini, web haritalarını ve ilgili GIS içeriğini denetlemek için birçok araç geliştirmiştir. Bu araçlar, bozuk katmanları, geçersiz veri kaynaklarını, şema tutarsızlıklarını, eksik meta verileri, geometri veya öznitelik sorunlarını, hizmet yapılandırma sorunlarını ve büyük kurumsal mülklerde yaygın olarak görülen diğer riskleri tanımlamak için kullanılır.Bu denetim yeteneği özellikle büyük dönüşüm programlarında önemlidir çünkü ekiplerin geçiş öncesinde hazırlık durumunu değerlendirmesine, geçiş sonrasında sonuçları doğrulamasına ve düzeltme için net sorun günlükleri oluşturmasına olanak tanır. Gerektiğinde otomatik birim testlerini, entegrasyon testlerini, dağıtım çalışma sayfalarını, yazılım dağıtım stratejilerini ve operasyonel devir belgelerini de destekliyoruz.

Proje ve sektör deneyimi

KDRM, kadastro, kamu hizmetleri, demiryolu, madencilik ve çevre programları da dahil olmak üzere çok sayıda büyük ölçekli proje ve sektörde veri taşıma ve dönüştürme çalışmalarına liderlik etmiş ve desteklemiştir. Bu deneyim, masaüstü GIS içeriğini, kurumsal coğrafi veritabanlarını, hizmet katmanlarını, web haritalama içeriğini, API’leri ve daha geniş mekansal uygulama entegrasyonunu içerir.

Teslimat modelimiz, yüksek sorumluluk gerektiren geçiş çalışmaları için tasarlanmıştır: kıdemli teknik personel, yazılı tekrarlanabilir iş akışları, net denetim yolları ve manuel çabayı, riski ve yeniden çalışmayı anlamlı ölçüde azalttığı her yerde otomasyon. Daha büyük dönüşüm programlarında bu, geçiş stratejisinin oluşturulmasına, araçların oluşturulmasına, deneme ve üretim geçişlerinin yürütülmesine, testlerin desteklenmesine ve operasyonel ekiplerin mülkiyeti güvenle alması için gereken raporlama ve devir teslimi sağlamaya yardımcı olabileceğimiz anlamına gelir.