Spaces:
Sleeping
Sleeping
File size: 1,915 Bytes
dcb54ac |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 |
import requests
from bs4 import BeautifulSoup
from urllib.parse import urlparse, parse_qs
def search_info(prompt):
# Замените пробелы на '+', чтобы использовать в URL
query = prompt.replace(' ', '+')
url = f"https://www.google.com/search?q={query}"
# Выполняем запрос
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
# Находим ссылки на сайты
links = []
for item in soup.find_all('h3'):
parent = item.find_parent('a')
if parent and 'href' in parent.attrs:
# Извлекаем фактический URL
link = parent['href']
parsed_url = urlparse(link)
if parsed_url.path == '/url':
# Получаем значение параметра 'q'
query_params = parse_qs(parsed_url.query)
if 'q' in query_params:
links.append(query_params['q'][0])
return links
def get_page_text(url):
# Выполняем запрос к странице и извлекаем текст
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
# Извлекаем текст из тега <body>
body = soup.find('body')
if body:
return body.get_text(separator='\n', strip=True)
return "Текст не найден"
def main():
prompt = input("Введите запрос для поиска: ") # Запрашиваем у пользователя ввод
results = search_info(prompt)
for link in results:
print(f"Ссылка: {link}")
text = get_page_text(link)
print(f"Текст: {text}\n") # Выводим полный текст страницы
if __name__ == "__main__":
main()
|