为我的大学时间表制作时间表应用程序

Question

我试图为我的大学时间表做一个时间表应用程序，因为我们的学校网站不提供可视化的时间表，而是提供这样的东西：

注册课程说明

考虑到这一点，我已经开始了这个项目，并列出了我需要采取的步骤来完成它。

1. 写一个登录学校网站的函数
2. 编写一个函数，保存包含注册课程描述的超文本标记语言文件
3. 编写一个函数，从超文本标记语言文件中抓取数据，并将必要的数据保存到COURSE_ID、COURSE_LOCATION、COURSE_STARTTIME、COURSE_ENDTIME等字段中。
4. 编写一个函数，用这些字段作为参数构建可视化时间表

这四个广义的步骤，我完成了第三步，就是数据抓取部分。然而，我遇到了一些问题，不知道如何做步骤1。我想知道是否有人能帮我。

要提供更多具体细节，请访问学校网站链接https://ics.twu.ca/ICS/.从这里开始，我不知道如何编写一个脚本来请求URL并使用用户名和密码发出POST请求。

我正在用Python编写这个程序。

Answer 1

身份验证请求是https://ics.twu.ca/ICS/上的POST。从页面获取所有输入名称/值对，使用会话记录cookie。此表单使用Multipart/form-data，因此使用file参数。

import requests
from bs4 import BeautifulSoup

url = "https://ics.twu.ca/ICS/"

username = "your_username"
password = "your_password"

session = requests.Session()

r = session.get(url)

soup = BeautifulSoup(r.text, "html.parser")

payload = dict((x, (None, y)) for x, y in [
    (i["name"], i.get("value"))
    for i in soup.find_all("input")
])

payload["userName"] = username
payload["password"] = password

print(payload)

r = session.post(url, files = payload)

print(r.text)

在上面的中，payload是一个输入值的字典，其元组为（无，值），因为我们不需要filename变量（我们不上传文件，只发送值）。检查这个

如果这是不工作添加标头，如用户代理