bir projem var , projede bir txt dosyasını açtırıp içindeki kelimeleri  hedef siteden çektiğim veriler ile karşılaştırıyorum sorun şu

txt de 10-20 kelime olunca kod sorunsuz çalışıyor fakat 1700-2000 kelime olunca kod hata veriyor

bu sorunu nasıl çözerim önerdiğiniz bir yöntem kütüphane varmıdır şimdiden teşekkürler

txt dosyanız çok büyük olduğu zaman her seferinde tüm içeriği tek seferde okutup kapatmak bellekte yer tutacağı için çok da tercih edilen bir yöntem değildir aslında. Fakat yine de bir txt dosyası ile çalışmak mecburi ise read() veya readlines() gibi tüm içeriği toptan okutmak gerine satır satır okutmak daha uygun olacaktır.

for line in open("dosya.txt"):



    print(line)

yukarıdaki örnekte her döngüde bir sonraki satır okutulacağı için her seferinde bellekte sadece tek satır yer tutacaktır. Bu okutmama gibi bir sorunun ortadan kalmasının yanında koda performans katacaktır.


Ama benim tavsiyem büyük verilerle çalışırken en verimli yöntem veritabanı ile çalışmaktır. Python sqlite3 kütüphanesi ile kelimelerinizi veritabanında tablolara kaydedip tek bir sorgu ile veritabanından hızlıca arama yapıp sonuca göre işlem yapabilirsiniz.

Sqlite kullanım için örnek Türkçe kaynak: https://python-istihza.yazbel.com/standart_moduller/sqlite.html

list = ["kelime1", "kelime2, "kelime3] şeklinde 2000-3000 kelimeyi kodun içine gömsem nasıl bir sonuç alırım sizce

Ya tabi olmasına olur ama kodun oluşturuğu bellek büyür, optimizasyon açısından txt okutmak bile tercih edilmiyorken böylesi kodlamada terör estirmek olur heralde

ayrıca tüm kelimeleri sıra sıra değil de illa da tek seferde koda yükletmek istiyosanız "rb" kipi ile okutmayı deneyin

dosya = open("kelimeler.txt", "rb")

content = dosya.read()

ama read binary ile okuttuğumuz için tekrar içeriği decode() etmeniz gerekecektir

content = dosya.read().decode()