Python ile Web Scraping Nedir? Yeni Başlayanlar İçin Basit Anlatım

Günümüzde internet üzerinde milyonlarca web sitesi var ve her gün devasa miktarda veri üretiliyor. Bu verileri elde etmek, analiz etmek veya kendi projelerimizde kullanmak için web scraping adı verilen bir yöntemden faydalanıyoruz. Peki, web scraping tam olarak nedir ve Python ile nasıl yapılır? Gelin, adım adım öğrenelim.

---

Web Scraping Nedir?

Web scraping, bir web sitesindeki verileri otomatik olarak çekip kaydetme işlemidir. Yani bir web sitesini ziyaret edip, sayfadaki başlıkları, tabloları, görselleri veya yazıları manuel olarak kopyalamak yerine, bunu bilgisayarın sizin için yapmasını sağlıyorsunuz.

Örneğin:

• E-ticaret sitelerinden ürün fiyatlarını çekmek,

• Haber sitelerindeki son haberleri toplamak,

• Spor istatistiklerini kaydetmek,

hepsi web scraping ile mümkün.

---

Python Neden Tercih Ediliyor?

Python, basit ve anlaşılır sözdizimi sayesinde web scraping için en popüler dillerden biridir. Ayrıca, bu iş için özel geliştirilmiş kütüphaneler (libraries) vardır. Bunlar arasında en çok kullanılanlar:

• Requests: Web sayfalarına istek göndermek için.

• BeautifulSoup: Web sayfalarını parçalayıp, istediğimiz veriyi çekmek için.

• Selenium: Daha karmaşık ve dinamik sayfaları kazımak için.

---

Basit Bir Örnek

Diyelim ki bir haber sitesinden başlıkları almak istiyoruz. Python ve BeautifulSoup kullanarak bunu nasıl yapabiliriz, bakalım:

# Gerekli kütüphaneleri yükleyelim
import requests
from bs4 import BeautifulSoup

# Hedef web sitesinin URL'si
url = "https://www.ornekhaber.com"

# Web sitesine istek gönder
response = requests.get(url)

# Sayfanın içeriğini al
soup = BeautifulSoup(response.text, "html.parser")

# Örneğin başlıkları çekmek için
headlines = soup.find_all("h2")  # h2 etiketleri başlıkları temsil ediyor olabilir

# Başlıkları yazdır
for headline in headlines:
    print(headline.text)

Bu basit örnekle, web sitesindeki tüm <h2> etiketlerini çekip ekrana yazdırabilirsiniz. Elbette, gerçek projelerde biraz daha detaylı işlemek gerekebilir.

---

Dikkat Edilmesi Gerekenler

Web scraping yaparken bazı noktalara dikkat etmek gerekir:

1. Web Sitesinin Kuralları: Bazı siteler scraping yapılmasına izin vermez. Bunun için sitenin robots.txt dosyasına bakabilirsiniz.

2. Fazla İstek Göndermemek: Sunucuyu zorlamamak için istekleri aralıklarla göndermek önemlidir.

3. Telif Hakları: Çektiğiniz verileri paylaşmadan veya ticari amaçla kullanmadan önce yasal durumunu kontrol edin.

---

Sonuç

Python ile web scraping, veriyi manuel olarak toplamanın çok daha hızlı ve otomatik bir yoludur. Yeni başlayan biri olarak requests ve BeautifulSoup ile başlayabilir, ardından Selenium gibi daha ileri araçlara geçebilirsiniz.

Unutmayın: Web scraping güçlendirici bir araçtır ama doğru ve etik kullanmak çok önemlidir.