Konuyu Oyla:
  • Toplam: 3 Oy - Ortalama: 3.67
  • 1
  • 2
  • 3
  • 4
  • 5
Python Dili Soru & Cevap
@Selcuk şunu bi denesene.

PHP Kod:
#!/usr/bin/env python

# -*- coding: utf-8 -*-

import re
import urllib2

urllist 
= open("Url.txt", "r").read().split('\n')
for 
i in urllist:
    print 
i
    git
=re.findall('<title.*?>(.*?)</title>',urllib2.urlopen(i.replace(' ','')).read())[0]
    
kaydet=open('SaveMyDataFile.txt','ab').write('\n'+git)
    print 
'\n'+git.decode('utf-8') 
Ara
Cevapla
@Ethnic


(22-10-2017, Saat: 15:58)Ethnic Nickli Kullanıcıdan Alıntı:  @Selcuk şunu bi denesene.

PHP Kod:
#!/usr/bin/env python

# -*- coding: utf-8 -*-

import re
import urllib2

urllist 
= open("Url.txt", "r").read().split('\n')
for 
i in urllist:
    print 
i
    git
=re.findall('<title.*?>(.*?)</title>',urllib2.urlopen(i.replace(' ','')).read())[0]
    
kaydet=open('SaveMyDataFile.txt','ab').write('\n'+git)
    print 
'\n'+git.decode('utf-8') 

Ara
Cevapla
@Selcuk sorun senin txt dosyasinda, muhtemelen en sonda bos bir satir daha var. ve biz split ile aldigimiz en sondaki satiri yani bos olan satiri url olarak okumaya calisiyor ve bu yuzden hata veriyor. yoksa text dosyasindaki butun linkleri basariyla oludugunu goruyoruz.

cözüm : ya text dosyanı düzenle, yada for dongusunde hata almamak icin try except methodu kullan..


PHP Kod:
#!/usr/bin/env python

# -*- coding: utf-8 -*-

import re
import urllib2

urllist 
= open("Url.txt", "r").read().split('\n')
for 
i in urllist:
    try:
        
git=re.findall('<title.*?>(.*?)</title>',urllib2.urlopen(i.replace(' ','')).read())[0]
        
kaydet=open('SaveMyDataFile.txt','ab').write('\n'+git)
        print 
'\n'+git.decode('utf-8') 
    
except:
        
pass 
Ara
Cevapla
Ara
Cevapla
print '\n'+git.decode('utf-8')

yerine

print '\n'+git

yazın, pc'de karakter hatası çıkartıyor. Eğer ekrana basılan yazılar düzgün okunsun istiyosan yine de şunu kullanabilirsin.

PHP Kod:
# -*- coding: utf-8 -*-

import re
import urllib2

urllist 
= open("Url.txt").readlines()
try:
    for 
i in urllist:
        
i = i.strip()
        
        if 
i.startswith("http"):
            print 
i
            git
=re.findall('<title.*?>(.*?)</title>',urllib2.urlopen(i.replace(' ','')).read())[0]
            
kaydet=open('SaveMyDataFile.txt','ab').write('\n'+git)
            print 
'\n'+git.decode('utf-8') 
except:
    
pass 

Eğer farklı bir hata oluştuğunu düşünüyosan ve try-except yüzünden hatanın ne olduğunu anlayamıyorsan, except bloğuna şunu yazabilirsin.

PHP Kod:
except Exception as hata:
    print 
hata 

Ayrıca;

urllist = open("Url.txt", "r").read().split('\n')

ile

urllist = open("Url.txt").readlines()

aynı işlevi yapıyor ama tek fark split ile aldığında "\n" çıkmaması ama satırın sonunda veya başında boşluk olduğunda yine hata verecektir o yüzden önlemi strip() metoduyla alırsınız. strip() satırın sonunda ve başında boşluk veya "\n" ve "\r" gibi karakterler varsa onlardan arındırır, zaten adı üstünde soyuyor Smile Ee bu durumda satırlarda herhangi bir aksama olmaması için readlines() ile okutmayı ben her zaman tercih etmişimdir. (yine de siz bilirsiniz)
Turbobit Premium Link Çeviri | Turbobit Link Generator | http://turbobit.qpython.club
Cevapla
benim simdiye kadar hic readlines'a isim düşmamişti. Smile strip()'i de öğrendiğimiz iyi oldu Smile
Ara
Cevapla
Yok abi ya windows işletim sisteminde denedim gene hata verdi.
resim göstereyim gördüğün gibi notepad++ son satır yok.
aslında gidip regex ile veriyi alıyor ama neden se En son hata veriyor yani try: except: eklemeden bu tür hatalar veriyor bunların nedeni ve çaresi yokmu
Ara
Cevapla
gecemorun mesajini okudun mu?
Ara
Cevapla
Şimdi geldim abi gördüm teşekkür ederim ayrıntılı açıklama için.
Ben buna her uğradığı url adresine git.add_header('Referer', 'http://www.python.org') eklemek istiyorum ekledim ama yanlış ekledim galiba
Birde sormak istediğim birşey daha var yavaş çalışıyor.
sayfa 101 de @hkrgln arkadaşın verdiği şu örneği buna nasıl eklerim

tarama_sayisi= 200

for i in links:
while threading.activeCount() >= tarama_sayisi:
time.sleep(0.1)
threading.Thread(target=tara,args=(i,)).start()

gecemor @Ethnic
Kod:
# -*- coding: utf-8 -*-
import threading
import re
import urllib2

tarama_sayisi= 200

urllist = open("Url.txt").readlines()
try:
    for i in urllist:
        i = i.strip()
        
        if i.startswith("http"):
            print i
    tara(i)
    while threading.activeCount() >= tarama_sayisi:                                
        time.sleep(0.1)                                                            
    threading.Thread(target=tara,args=(i,)).start()
    git=re.findall('<title.*?>(.*?)</title>',urllib2.urlopen(i.replace(' ','')).read())[0]
            git.add_header('Referer', 'http://www.python.org')
            kaydet=open('SaveMyDataFile.txt','ab').write('\n'+git)
            print '\n'+git.decode('utf-8')
            #except Exception as hata:
    #print hata
except:
    pass
Ara
Cevapla
urllib2 ile header eklemek için ilk olarak "Request" fonksiyonunu kullanmalısın. Örnek;

# ilk olarak istek gönderiyoruz
istek = urllib2.Request("http://python.org")

# sonra gönderdiğimiz isteğe header ekliyoruz
istek.add_header("Referer", "http://python.org")

# ve en son "urlopen" fonksiyonu ile isteği okutuyoruz
oku = urllib2.urlopen(istek).read()


threading'i çalıştırmak için ise bir fonksiyona ihtiyacın var. Url okutma işlemlerini bir fonksiyon içine al ve parametre olarak "i" yaz, "def fonksiyon(i):" şeklinde. Burdaki "i" nin adı farklı olabilir ama bu i senin yönlendireceğin url'lerin yerine geçecek olan "i" dir. (for döngüsündeki)

Daha sonra for döngüsü içindeki threading'de "target=fonksiyon_adı" ve "args=(i,)" yaz. "tarama sayısı" diye yazdığın kısım da maksimum thread sayısını belirler ve bu bağlantı hızına ve cihazın işlem gücüne göre değişir. Eğer çok yüksek yaparsan threading hatalarıyla karşılaşabilirsin.

Bunları böyle anlattım çünkü hazır verdikten sonra bütün bunların bi anlamı kalmaz, parçaları sen birleştireceksin ki python'u daha iyi kavramanda bir fayda sağlayabilelim Wink
Turbobit Premium Link Çeviri | Turbobit Link Generator | http://turbobit.qpython.club
Cevapla

{lang: 'en'}


Konu ile Alakalı Benzer Konular
Konular Yazar Yorumlar Okunma Son Yorum
  15gb .myd uzantılı dosya python ile okutma perry 1 2,015 27-11-2022, Saat: 17:59
Son Yorum: perry
  GÜNCEL Python request , c# request e göre çok yavaş ne yapabilirim perry 12 5,204 28-09-2022, Saat: 20:27
Son Yorum: krast
  YENİ Python Pyqt5 memory leak sorunu perry 3 2,439 28-09-2022, Saat: 11:33
Son Yorum: gecemor
  YENİ PYTHON ads approval CaglarDevv 2 2,255 04-07-2022, Saat: 01:23
Son Yorum: CaglarDevv
  python konusunda yardıma ihtiyacım var $cr!pt HUB 3 1,679 15-06-2022, Saat: 18:11
Son Yorum: CaglarDevv

Hızlı Menü:


Konuyu Okuyanlar: 2 Ziyaretçi
Change Theme