Question

我实际上是在尝试编写一些“ GPS”代码，但由于日常限制，我实际上无法使用Google API。

我决定使用“ viamichelin”网站，该网站为我提供了两个地址之间的距离。我创建了一些代码来获取所需的所有URL地址，如下所示：

import pandas

import numpy as np

df = pandas.read_excel('C:\Users\Bibi\Downloads\memoire\memoire.xlsx', sheet_name='Clients')

df2= pandas.read_excel('C:\Users\Bibi\Downloads\memoire\memoire.xlsx', sheet_name='Agences')

matrix=df.as_matrix(columns=None)

clients = np.squeeze(np.asarray(matrix))

matrix2=df2.as_matrix(columns=None)

agences = np.squeeze(np.asarray(matrix2))

compteagences=0

comptetotal=0

for j in agences:

    compteclients=0

    for i in clients:

        print agences[compteagences]

        print clients[compteclients]

        url ='https://fr.viamichelin.be/web/Itineraires?departure='+agences[compteagences]+'&arrival='+clients[compteclients]+'&arrivalId=34MTE1MnJ5ZmQwMDMzb3YxMDU1ZDFvbGNOVEF1TlRVNU5UUT1jTlM0M01qa3lOZz09Y05UQXVOVFl4TlE9PWNOUzQzTXpFNU5nPT1jTlRBdU5UVTVOVFE9Y05TNDNNamt5Tmc9PTBqUnVlIEZvbmQgZGVzIEhhbGxlcw==&index=0&vehicle=0&type=0&distance=km&currency=EUR&highway=false&toll=false&vignette=false&orc=false&crossing=true&caravan=false&shouldUseTraffic=false&withBreaks=false&break_frequency=7200&coffee_duration=1200&lunch_duration=3600&diner_duration=3600&night_duration=32400&car=hatchback&fuel=petrol&fuelCost=1.393&allowance=0&corridor=&departureDate=&arrivalDate=&fuelConsumption='

        print url

        compteclients+=1

        comptetotal+=1

    compteagences+=1

我所有的数据都在Excel上，这就是为什么我使用了pandas库。我拥有项目所需的所有URL。

尽管，我想提取所需的公里数，但是有一个小问题。在源代码中，我没有所需的信息，因此无法使用Python提取信息...网站显示如下： Michelin

当我单击“检查”时，我可以找到所需的信息（在左侧），但在源代码中却找不到（在右侧）...有人可以为我提供帮助吗？ Itinerary

我已经尝试过了，但是没有成功：

import os

import csv

import requests

from bs4 import BeautifulSoup

requete = requests.get("https://fr.viamichelin.be/web/Itineraires?departure=Rue%20Lebeau%2C%20Liege%2C%20Belgique&departureId=34MTE1Mmc2NzQwMDM0NHoxMDU1ZW44d2NOVEF1TmpNek5ERT1jTlM0MU5qazJPQT09Y05UQXVOak16TkRFPWNOUzQxTnpBM01nPT1jTlRBdU5qTXpOREU9Y05TNDFOekEzTWc9PTBhUnVlIExlYmVhdQ==&arrival=Rue%20Rys%20De%20Mosbeux%2C%20Trooz%2C%20Belgique&arrivalId=34MTE1MnJ5ZmQwMDMzb3YxMDU1ZDFvbGNOVEF1TlRVNU5UUT1jTlM0M01qa3lOZz09Y05UQXVOVFl4TlE9PWNOUzQzTXpFNU5nPT1jTlRBdU5UVTVOVFE9Y05TNDNNamt5Tmc9PTBqUnVlIEZvbmQgZGVzIEhhbGxlcw==&index=0&vehicle=0&type=0&distance=km&currency=EUR&highway=false&toll=false&vignette=false&orc=false&crossing=true&caravan=false&shouldUseTraffic=false&withBreaks=false&break_frequency=7200&coffee_duration=1200&lunch_duration=3600&diner_duration=3600&night_duration=32400&car=hatchback&fuel=petrol&fuelCost=1.393&allowance=0&corridor=&departureDate=&arrivalDate=&fuelConsumption=")

page = requete.content

soup = BeautifulSoup(page, "html.parser")

print soup

Answer 1

查看页面的检查器，实际的路由是通过对this rather long URL的JavaScript调用完成的。

您需要的数据似乎在该响应中，从_scriptLoaded(开始。（由于它是JavaScript对象文字，因此您可以使用Python的内置JSON库将数据加载到dict中。）

HTML隐藏元素

1 个答案: