scossa/scrapeje
1
1
Fork 0
Code Issues Pull Requests Projects Releases Wiki Activity

update

Browse Source
This commit is contained in:
scossa
2023-11-26 21:19:29 +01:00
parent 5a7767dd82
commit 277f12e4ea
1 changed files with 52 additions and 42 deletions
Download Patch File Download Diff File Expand all files Collapse all files

94
scrapeje.py
View File

@@ -25,10 +25,10 @@ print ("\nesempio: https://www.justeat.it/restaurants-pizzeria-la-garganica-bolo
restaurant_url = input('INSERISCI IL LINK DELLA PAGINA DEL RISTORANTE: ') restaurant_url = input('INSERISCI IL LINK DELLA PAGINA DEL RISTORANTE: ')
#PER DEBUG #PER DEBUG
#restaurant_url = 'https://www.justeat.it/restaurants-pizzeria-la-garganica-bologna/menu' #restaurant_url = 'https://www.justeat.it/restaurants-pizzeria-del-mercato-bologna/menu'
#INIZIALLIZZO PARSER #SCRAPE
driver = webdriver.Chrome() driver = webdriver.Chrome()
driver.get(restaurant_url) driver.get(restaurant_url)
@@ -40,11 +40,11 @@ page = driver.page_source
with open('JEmenu.html', 'w') as f: with open('JEmenu.html', 'w') as f:
f.write(page) f.write(page)
#apre e legge il file
#PARSER
with open('JEmenu.html', 'r') as f: with open('JEmenu.html', 'r') as f:
page = f.read() page = f.read()
#PARSER
soup = BeautifulSoup(page, "html.parser") soup = BeautifulSoup(page, "html.parser")
@@ -112,6 +112,7 @@ for menu in soup.find_all(attrs={"data-test-id": "menu-item"}):
# #stampa liste # #stampa liste
print("\n")
for x in range(len(nome)): for x in range(len(nome)):
# print("\n") # print("\n")
print(nome[x]) print(nome[x])
@@ -120,10 +121,11 @@ for x in range(len(nome)):
print(prezzo[x]) print(prezzo[x])
#stampa info ristorante #stampa info ristorante
print("\n") print("-" * (len(desc)) + "\n")
print(nrist) print(nrist)
print("telefono:",tel) print(restaurant_address.strip())
print(restaurant_address.strip() + "\n") print("Telefono:",tel,"\n")
doppione = "" doppione = ""
for i in range(len(result)): for i in range(len(result)):
if re.search(r"[a-zA-Z]", result[i]): if re.search(r"[a-zA-Z]", result[i]):
@@ -134,15 +136,10 @@ for i in range(len(result)):
elif re.search(r"\d", result[i]): elif re.search(r"\d", result[i]):
print(result[i], result[i+1]) print(result[i], result[i+1])
doppione = (result[i+1]) doppione = (result[i+1])
print("\n" + "-" * (len(desc))+ "\n")
#stampa lunghezza liste
print("lista nome:",len(nome))
print("lista desc:",len(desc))
print("lista npezzi:",len(npezzi))
print("lista prezzi:",len(prezzo)) #sono stringhe ovvero ci sono anche prezzi come "da 1,00 €"
#Genera la lista prezzoN[] che è un clone di "prezzo[] ma con i valori double azichè string" #Genera la lista prezzoN[] che è un clone di "prezzo[] ma con i valori float anzichè string"
prezzoN = prezzo.copy() prezzoN = prezzo.copy()
for i in range(len(prezzo)): for i in range(len(prezzo)):
if "€" in prezzo[i]: if "€" in prezzo[i]:
@@ -152,39 +149,52 @@ for i in range(len(prezzo)):
prezzoN[i] = float(prezzoN[i]) prezzoN[i] = float(prezzoN[i])
else: else:
prezzoN[i] = 99999 prezzoN[i] = 99999
#per debug
# #PER DEBUG
# for x in range(len(nome)): # for x in range(len(nome)):
# print(prezzoN[x]) # print(prezzoN[x])
# print (len(prezzo)) # print("\n" + "-" * 25 + "\n")
# print (len(prezzoN)) # print ("lista prezzo: ",len(prezzo))
# print(len(nome)) # print ("lista prezzoN: ",len(prezzoN))
# print ("lista nome: ",len(nome))
# #PER DEBUG
# #stampa lunghezza liste
# print("\n" + "-" * 25 + "\n")
# print("lista nome: ",len(nome))
# print("lista desc: ",len(desc))
# print("lista npezzi: ",len(npezzi))
# print("lista prezzi: ",len(prezzo)) #sono stringhe"
# print("\n" + "-" * 25 + "\n")
# # Genera codice HTML
# html = "<html><body>"
# for x in range(len(nome)):
# html += "<h2>" + nome[x] + "</h2>"
# html += "<p>" + str(desc[x]) + "</p>"
# html += "<p>N. pezzi disponibili: " + str(npezzi[x]) + "</p>"
# html += "<p>Prezzo: €" + str(prezzoN[x]) + "</p>"
# html += "<button onclick=\"aggiungiProdotto('" + nome[x] + "', '" + str(prezzoN[x]) + "')\">+1</button>"
# html += "<br><br>"
# Genera codice HTML # html += "<br><hr><h2>Prodotti aggiunti</h2>"
html = "<html><body>" # html += "<div id=\"prodottiAggiunti\"></div>"
for x in range(len(nome)): # html += "<script>"
html += "<h2>" + nome[x] + "</h2>" # html += "function aggiungiProdotto(nome, prezzoN) {"
html += "<p>" + str(desc[x]) + "</p>" # html += " var prodotto = nome + ' (€' + Number(prezzo).toFixed(2) + ')';"
html += "<p>N. pezzi disponibili: " + str(npezzi[x]) + "</p>" # html += " var box = document.getElementById('prodottiAggiunti');"
html += "<p>Prezzo: €" + str(prezzoN[x]) + "</p>" # html += " box.innerHTML += '<p>' + prodotto + '</p>';"
html += "<button onclick=\"aggiungiProdotto('" + nome[x] + "', '" + str(prezzoN[x]) + "')\">+1</button>" # html += "}"
html += "<br><br>" # html += "</script>"
# html += "</body></html>"
html += "<br><hr><h2>Prodotti aggiunti</h2>"
html += "<div id=\"prodottiAggiunti\"></div>"
html += "<script>"
html += "function aggiungiProdotto(nome, prezzoN) {"
html += " var prodotto = nome + ' (€' + Number(prezzo).toFixed(2) + ')';"
html += " var box = document.getElementById('prodottiAggiunti');"
html += " box.innerHTML += '<p>' + prodotto + '</p>';"
html += "}"
html += "</script>"
html += "</body></html>"
# Salvataggio su file # # Salvataggio su file
with open("pagina.html", "w") as file: # with open("pagina.html", "w") as file:
file.write(html) # file.write(html)
#os.remove("JEmenu.html") #Pulisce
#ToDo:PROPORRE DI SALVARE IN RUBRICA
os.remove("JEmenu.html")