Resim
Yorum Gönder

Genel API Veri Dönüştürücü ve Analizci

Genel API Veri Dönüştürücü ve Analizci

Bu proje, halka açık bir API'dan (örneğin döviz kurları, hava durumu veya kamu verileri) veri çekmeyi, karmaşık JSON yapısını düzleştirmeyi ve analiz için hazırlamayı amaçlar.

Kapsanan Modüller: requests, json, pandas, logging, OOP

Proje Adımları ve Rehberlik

Adım 1: API İstemci Sınıfını Oluşturma (requests, json, OOP)

Amaç: API iletişimini güvenilir bir şekilde yöneten bir yapı kurmak.

  1. ApiClient Sınıfı: API'ın temel URL'sini ve varsa anahtarını (API Key) tutacak nitelikler (attributes) tanımlayın.

  2. veri_cek(endpoint) Metodu: Bu metoda bir API uç noktası (/latest, /users gibi) girdi olarak verin.

  3. İstek Atma: requests.get() kullanarak API'a istek atın.

  4. JSON Dönüşümü: Başarılı bir yanıtta (response.status_code == 200), .json() metodu ile yanıtı bir Python sözlüğüne (dict) dönüştürün ve geri döndürün.

Adım 2: JSON Veri Temizleme ve Düzleştirme (json, pandas)

Amaç: API'dan gelen iç içe (nested) JSON yapısını pandas'ın anlayacağı düz (flat) tablo formatına getirmek.

  1. Dönüşüm Metodu: ApiClient sınıfına veya ayrı bir JsonProcessor sınıfına json_duzlestir(veri) adında bir metot ekleyin.

  2. Veri Ayıklama: JSON verisi içindeki gereksiz üst katmanları (örneğin, "data": { ... } yapısındaki "data") çıkarın.

  3. DataFrame Yükleme: Temizlenmiş JSON yapısını pd.DataFrame.from_dict() veya pd.json_normalize() kullanarak doğrudan bir DataFrame'e yükleyin. (İpucu: Eğer iç içe listeler varsa, json_normalize hayat kurtarıcıdır.)

Adım 3: Analiz ve Raporlama (pandas)

Amaç: Düzleştirilmiş veriden analiz yapmak.

  1. Filtreleme: DataFrame üzerinde belirli koşullara göre (örneğin, popülasyonu 1 milyondan fazla olan şehirler) filtreleme yapın.

  2. Sıralama: Veriyi belirli bir sütuna göre (Beğeni Sayısı, Son Güncelleme Tarihi gibi) sıralayın.

  3. Özetleme: Veri setinin ana istatistiklerini (.describe()) yazdırın.

Adım 4: Güvenilirlik ve Geri Bildirim (logging)

  1. Hata Kontrolü: API isteği başarısız olduğunda (status_code 400 veya 500 ise), hata kodunu belirten logging.error mesajları oluşturun.

  2. Boş Veri: API'dan veri gelse bile, JSON yanıtının beklediğiniz alanı boşsa, bir logging.warning mesajı ile durumu bildirin.

"Web'in Diliyle Konuşun!

JSON, günümüz yazılımlarının omurgasıdır. Bu projeyi tamamlayarak, yalnızca bir API'dan veri çekmeyi değil, aynı zamanda o karmaşık veriyi anlamlı bir pandas tablosuna ustaca dönüştürmeyi öğrenirsiniz. Bu yetenek, web geliştirme ve veri mühendisliği rollerinde en çok aranan becerilerden biridir. Projeyi bitirdiğinizde, herhangi bir web servisiyle entegre olmaya hazırsınız!"

Yorumlar

Yorum Gönder

Bu blogdaki popüler yayınlar

Python random Modülü

Python random Modülü: Rastgelelik Oluşturma ve Seçim Yapma random Modülü Nedir? random modülü, rastgele sayılar ve rastgele seçimler üretmek için kullanılır. Bilgisayarların gerçek anlamda rastgele sayılar üretemediğini (sözde rastgele - pseudo-random) unutmamak gerekir, ancak bu modül, çoğu uygulama için yeterli rastgeleliği sağlar. import random 1. Temel Rastgele Sayı Üretimi Metot Açıklama Örnek Çıktı Aralığı random.random() 0.0 dahil, 1.0 hariç aralıkta bir rastgele ondalıklı sayı (float) üretir. [0.0, 1.0) random.randint(a, b) a  ve b  dahil olmak üzere, belirtilen aralıkta bir rastgele tam sayı (int) üretir. [a, b] (dahil) random.randrange(start, stop, step) range() fonksiyonu gibi çalışır. stop hariç bir tam sayı üretir. random.randrange(1, 10, 2)   random.uniform(a, b) a  ve b  dahil veya hariç olabilen aralıkta bir rastgele ondalıklı sayı üretir. [a, b]  (yaklaşık) Örnek Kullanım # 1 ile 10 arasında tam sayı (1 ve 10 dahil) zar_sonucu = rando...
Devamını oku »

Python print()

Python Çıktısı / Yazdırma: print() Fonksiyonu ile Tanışın Merhaba! Python'da kod yazmaya başladığınızda, yazdığınız programın "konuşmasını" sağlamanız gerekir. Programınızın ekrana metin, değişkenlerin değerlerini veya hesaplama sonuçlarını göstermesine çıktı verme (output) denir. Python'da bunu yapmanın ana yolu, yerleşik olan print() fonksiyonudur. Bu fonksiyon, bir programcının araç kutusundaki en temel ve en önemli araçtır. Bu yazıda, print() fonksiyonunun basit kullanımından, birden fazla öğeyi nasıl birleştireceğinize ve çıktı biçimini nasıl kontrol edeceğinize kadar her şeyi öğreneceğiz. 1. Temel Kullanım: Metinleri Yazdırma print() fonksiyonunun en temel görevi, ona verdiğiniz metinleri (string'leri) olduğu gibi ekrana yazdırmaktır. Kural: Yazdırmak istediğiniz metni tırnak işaretleri ( " " veya ' ' ) içine almanız gerekir. Örnek: print( "Merhaba Python dünyası!" ) print( 'Bugün hava çok güzel.' ) Çıktı: Merhaba Py...
Devamını oku »

Yazılım Nedir?

Resim
  Yazılım Nedir? Donanımın Ruhunu Harekete Geçiren Görünmez Güç Temel Tanım: Donanıma Hayat Veren Talimatlar Dizisi En basit ve temel tanımıyla Yazılım (Software) ; bir bilgisayar, akıllı telefon, tablet veya herhangi bir elektronik aygıtın belirli bir görevi yerine getirmesini sağlayan programların, talimatların ve verilerin tümüdür. Elinizle dokunabildiğiniz her şey (monitör, klavye, telefonun kasası) Donanım (Hardware) iken; bu donanımı çalıştıran, ona ne yapacağını söyleyen soyut kısım Yazılım 'dır. Basit Bir Analoji: Yazılım, bir orkestra şefi gibidir. Donanım (enstrümanlar) orada durur, ancak şef (yazılım) talimat vermeden müzik (görev) başlamaz. Yazılım Ne İşe Yarar? (Problem Çözmek) Yazılımın tek bir temel amacı vardır: Bir problemi çözmek veya bir ihtiyacı gidermek. İhtiyaç: Arkadaşınızla konuşmak. Yazılım: WhatsApp, Telegram gibi uygulamalar. İhtiyaç: İnternette bilgi aramak. Yazılım: Google Chrome, Safari gibi tarayıcılar. İhtiyaç: Bilgisayarı kullanmak. Yazılım...
Devamını oku »