使用 Selenium 自动化网页交互：定位并操作下拉菜单选项

try:
    # 等待下拉菜单触发器可见并可点击
    dropdown_trigger = WebDriverWait(driver, 10).until(
        EC.element_to_be_clickable((By.CLASS_NAME, "aio-tabs-button"))
    )
    dropdown_trigger.click()
    print("成功点击下拉菜单触发器。")
    time.sleep(1) # 等待下拉菜单展开
except Exception as e:
    print(f"点击下拉菜单触发器失败: {e}")
    driver.quit()
    exit()

try:
    # 等待包含文本“100”的选项可见并可点击
    option_100 = WebDriverWait(driver, 10).until(
        EC.element_to_be_clickable((By.XPATH, "//div[@class='item' and contains(text(), '100')]"))
    )
    option_100.click()
    print("成功选择选项 '100'。")
    time.sleep(2) # 等待页面内容更新
except Exception as e:
    print(f"选择选项 '100' 失败: {e}")
finally:
    # 完成操作后关闭浏览器
    driver.quit()

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time

def set_items_per_page(url, items_count):
    """
    使用 Selenium 导航到指定 URL，并设置每页显示的项目数量。

    Args:
        url (str): 目标网页的 URL。
        items_count (str): 要设置的每页显示项目数量的字符串表示（例如 "100"）。
    """
    driver = None
    try:
        # 初始化 WebDriver
        driver = webdriver.Chrome() # 确保 ChromeDriver 可用或指定路径
        driver.get(url)
        print(f"已打开网页: {url}")

        # 步骤 1: 定位并点击下拉菜单触发器
        dropdown_trigger = WebDriverWait(driver, 10).until(
            EC.element_to_be_clickable((By.CLASS_NAME, "aio-tabs-button"))
        )
        dropdown_trigger.click()
        print("成功点击下拉菜单触发器。")
        time.sleep(1) # 短暂等待下拉菜单展开

        # 步骤 2: 定位并选择目标选项
        # 构建 XPath 以查找包含指定文本的选项
        option_xpath = f"//div[@class='item' and contains(text(), '{items_count}')]"
        target_option = WebDriverWait(driver, 10).until(
            EC.element_to_be_clickable((By.XPATH, option_xpath))
        )
        target_option.click()
        print(f"成功选择选项 '{items_count}'。")
        time.sleep(3) # 等待页面内容更新

        # 可以在此处添加进一步的验证或操作
        print("操作完成。")

    except Exception as e:
        print(f"发生错误: {e}")
    finally:
        if driver:
            driver.quit()
            print("浏览器已关闭。")

# 调用函数
if __name__ == "__main__":
    target_url = "https://www.gurufocus.com/stocks"
    set_items_per_page(target_url, "100")

import requests
import json

# 示例：假设发现了一个用于获取股票数据的API
# 这只是一个概念性示例，实际API可能需要认证、不同的参数等
api_url = "https://www.gurufocus.com/api/stocks/list" # 假设的API URL
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/106.0.0.0 Safari/537.36",
    "Accept": "application/json",
    # 可能还需要其他请求头，如认证令牌等
}
params = {
    "pageSize": 100, # 设置每页显示100项
    "page": 1,
    # 其他筛选参数
}

try:
    response = requests.get(api_url, headers=headers, params=params)
    response.raise_for_status() # 检查HTTP请求是否成功
    data = response.json()
    # 处理获取到的数据
    print("通过 API 获取到数据：")
    # print(json.dumps(data, indent=2)) # 打印部分数据
    print(f"数据条数: {len(data.get('stocks', []))}") # 假设数据在'stocks'键中
except requests.exceptions.RequestException as e:
    print(f"API 请求失败: {e}")
except json.JSONDecodeError as e:
    print(f"JSON 解析失败: {e}")