0

0

JavaScript中从API获取并解析CSV数据:变量填充与数据匹配指南

心靈之曲

心靈之曲

发布时间:2025-10-22 11:02:27

|

791人浏览过

|

来源于php中文网

原创

JavaScript中从API获取并解析CSV数据:变量填充与数据匹配指南

本文详细介绍了如何使用javascript从远程api获取csv数据,并利用papaparse库进行解析和处理。重点阐述了在数据解析过程中,确保变量正确填充的关键步骤,特别是如何核对csv文件的实际列名与代码中的数据访问方式,以避免常见的“变量无法获取数据”问题。通过示例代码,演示了数据获取、解析、过滤和展示的完整流程,并提供了重要的注意事项和最佳实践。

1. 引言:从API获取CSV数据的挑战

在Web开发中,我们经常需要从外部API获取数据。当数据源是CSV格式时,除了常规的网络请求外,还需要一个额外的解析步骤才能将原始文本转换为结构化的JavaScript对象。一个常见的挑战是,即使成功获取并解析了CSV数据,也可能因为代码中引用的列名与实际CSV文件中的列名不匹配,导致变量无法正确填充数据。本教程将深入探讨如何解决这一问题,确保数据能够准确地从CSV源流向您的应用程序。

2. 核心工具与技术

要实现从API获取并解析CSV数据,我们将主要使用以下技术:

  • fetch API: 用于发起网络请求,从指定的URL获取CSV文件内容。
  • PapaParse库: 一个强大的JavaScript CSV解析器,能够将CSV文本转换为JavaScript对象数组,并自动处理各种CSV格式。
  • DOM操作: 用于获取用户输入和触发数据加载。

3. 数据获取与解析流程

整个数据处理流程可以分为以下几个核心步骤:

  1. 获取用户输入: 从HTML输入框获取用户想要查询的学校名称。
  2. 发起API请求: 使用fetch API向CSV数据源发起请求。
  3. 解析CSV数据: 利用PapaParse库将获取到的CSV文本解析成结构化的JavaScript对象数组。
  4. 查找并过滤数据: 根据用户输入的学校名称,在解析后的数据中查找匹配的记录。
  5. 展示数据: 将找到的学校信息输出到控制台。

3.1 HTML结构

首先,我们需要一个简单的HTML页面来接收用户输入并触发数据加载:

立即学习Java免费学习笔记(深入)”;




    
    
    学校信息查询
    
    


    
    
    

     

在上述HTML中,我们引入了PapaParse库,并创建了一个文本输入框(id="schoolName")和一个按钮,点击按钮将调用getSchoolInformation()函数。

3.2 JavaScript实现

接下来是核心的JavaScript逻辑。我们将定义三个主要函数:getSchoolInformation、findSchoolInformation 和 displaySchoolInformation。

3.2.1 getSchoolInformation():数据获取入口

这个函数负责启动整个数据获取和解析过程。它首先获取用户输入的学校名称,然后使用fetch API从指定的CSV URL获取数据。

GPT Detector
GPT Detector

在线检查文本是否由GPT-3或ChatGPT生成

下载
// Function to retrieve school information
function getSchoolInformation() {
  const schoolName = document.getElementById("schoolName").value;
  console.log("正在尝试查询:", schoolName);

  fetch('https://raw.githubusercontent.com/rfordatascience/tidytuesday/master/data/2020/2020-03-10/tuition_cost.csv')
    .then(response => {
      if (!response.ok) {
        throw new Error(`HTTP 错误! 状态: ${response.status}`);
      }
      return response.text(); // 获取原始CSV文本
    })
    .then(csvData => {
      // CSV数据获取成功,调用查找函数
      const schoolInfo = findSchoolInformation(schoolName, csvData);
      displaySchoolInformation(schoolInfo);
    })
    .catch(error => {
      console.error('获取或解析数据时发生错误:', error);
    });
}

注意事项:

  • fetch API返回一个Promise。我们使用.then()链式调用来处理响应。
  • response.text()将响应体解析为纯文本,这正是PapaParse所需的输入。
  • 添加了基本的错误处理 (response.ok 检查和 .catch() 块),以提高代码的健壮性。
3.2.2 findSchoolInformation():CSV解析与数据匹配

这是整个流程中最关键的函数,它负责解析CSV文本并根据用户输入的学校名称进行数据过滤。

// Function to find school information based on school name
function findSchoolInformation(schoolName, csvData) {
  // 使用 PapaParse 解析 CSV 数据
  const parsedData = Papa.parse(csvData, {
    header: true, // 关键选项:将第一行作为列头
    skipEmptyLines: true // 跳过空行
  }).data;

  const schoolInfo = [];

  // 调试辅助:打印解析后的第一行数据,检查实际列名
  // console.log('解析后的数据示例 (第一行):', parsedData[0]);

  parsedData.forEach(function(row) {
    // !!!关键点:核对CSV文件的实际列名
    // 原始CSV文件的列名可能是 "name", "degree_length", "in_state_tuition"
    // 而不是 "INSTNM", "CURROPER", "TUITIONFEE_IN"
    const collegeName = row.name; // 使用实际的列名
    const degreeLength = row.degree_length; // 使用实际的列名
    const tuitionCost = row.in_state_tuition; // 使用实际的列名

    if (collegeName && collegeName.toLowerCase() === schoolName.toLowerCase()) {
      // 进行数据类型转换和有效性检查
      const parsedDegreeLength = parseInt(degreeLength);
      const parsedTuitionCost = parseFloat(tuitionCost);

      if (!isNaN(parsedDegreeLength) && !isNaN(parsedTuitionCost)) {
        schoolInfo.push({
          collegeName: collegeName,
          degreeLength: parsedDegreeLength,
          tuitionCost: parsedTuitionCost
        });
      }
    }
  });
  console.log('找到的学校信息:', schoolInfo);
  return schoolInfo;
}

关键点与注意事项:

  • Papa.parse(csvData, { header: true, skipEmptyLines: true }):
    • header: true 是至关重要的选项。它告诉PapaParse将CSV文件的第一行视为列头,并将每行数据解析为以这些列名为键的JavaScript对象。例如,如果CSV第一行是 name,state,tuition, 那么解析后的对象会是 { name: "...", state: "...", tuition: "..." }。
  • 核对实际列名:
    • 这是解决“变量无法获取数据”问题的核心。在原始问题中,用户尝试使用 row["INSTNM"] 等,但实际的CSV文件(通过提供的URL查看)的列名是 name, degree_length, in_state_tuition。
    • 如何核对? 最直接的方法是下载CSV文件并打开查看其第一行,或者在代码中加入 console.log('解析后的数据示例 (第一行):', parsedData[0]); 来查看PapaParse解析出的对象结构和键名。
    • 一旦确定了正确的列名,就应该使用 row.name (点表示法) 或 row["name"] (方括号表示法) 来访问数据。点表示法通常更简洁和推荐。
  • 数据类型转换: CSV中的所有数据都是字符串。在进行数值比较或计算之前,需要使用 parseInt() 或 parseFloat() 将它们转换为对应的数值类型。同时,通过 isNaN() 检查转换结果的有效性。
  • 过滤逻辑: if (collegeName && collegeName.toLowerCase() === schoolName.toLowerCase()) 用于不区分大小写地匹配学校名称。
3.2.3 displaySchoolInformation():结果展示

这个函数负责遍历找到的学校信息数组,并将其格式化输出到控制台。

// Function to display school information in the console
function displaySchoolInformation(schoolInfo) {
  if (schoolInfo.length === 0) {
    console.log("未找到匹配的学校信息。");
    return;
  }

  console.log("\n--- 查询结果 ---");
  schoolInfo.forEach(function(info) {
    console.log("学校名称: " + info.collegeName);
    console.log("学位时长: " + info.degreeLength + " 年");
    console.log("州内学费: $" + info.tuitionCost.toFixed(2));
    console.log("------------------------------");
  });
}

注意事项:

  • 这里使用了 forEach 循环,这在现代JavaScript中是遍历数组的常见且推荐的方式。
  • toFixed(2) 用于将学费格式化为两位小数。
  • 增加了当 schoolInfo 为空时的提示信息,提升用户体验。

4. 完整的JavaScript代码

将上述所有函数整合到一个JavaScript文件中(例如 app.js):

// app.js

// Function to retrieve school information
function getSchoolInformation() {
  const schoolName = document.getElementById("schoolName").value;
  console.log("正在尝试查询:", schoolName);

  fetch('https://raw.githubusercontent.com/rfordatascience/tidytuesday/master/data/2020/2020-03-10/tuition_cost.csv')
    .then(response => {
      if (!response.ok) {
        throw new Error(`HTTP 错误! 状态: ${response.status}`);
      }
      return response.text();
    })
    .then(csvData => {
      const schoolInfo = findSchoolInformation(schoolName, csvData);
      displaySchoolInformation(schoolInfo);
    })
    .catch(error => {
      console.error('获取或解析数据时发生错误:', error);
    });
}

// Function to find school information based on school name
function findSchoolInformation(schoolName, csvData) {
  const parsedData = Papa.parse(csvData, {
    header: true,
    skipEmptyLines: true
  }).data;

  const schoolInfo = [];

  // 在这里可以取消注释下一行来检查实际的列名
  // console.log('解析后的数据示例 (第一行):', parsedData[0]);

  parsedData.forEach(function(row) {
    // 确保使用CSV文件中的实际列名
    const collegeName = row.name;
    const degreeLength = row.degree_length;
    const tuitionCost = row.in_state_tuition;

    if (collegeName && collegeName.toLowerCase() === schoolName.toLowerCase()) {
      const parsedDegreeLength = parseInt(degreeLength);
      const parsedTuitionCost = parseFloat(tuitionCost);

      if (!isNaN(parsedDegreeLength) && !isNaN(parsedTuitionCost)) {
        schoolInfo.push({
          collegeName: collegeName.toLowerCase(), // 可以选择存储小写或原始名称
          degreeLength: parsedDegreeLength,
          tuitionCost: parsedTuitionCost
        });
      }
    }
  });
  console.log('找到的学校信息:', schoolInfo);
  return schoolInfo;
}

// Function to display school information in the console
function displaySchoolInformation(schoolInfo) {
  if (schoolInfo.length === 0) {
    console.log("未找到匹配的学校信息。");
    return;
  }

  console.log("\n--- 查询结果 ---");
  schoolInfo.forEach(function(info) {
    console.log("学校名称: " + info.collegeName);
    console.log("学位时长: " + info.degreeLength + " 年");
    console.log("州内学费: $" + info.tuitionCost.toFixed(2));
    console.log("------------------------------");
  });
}

5. 注意事项与最佳实践

  • 始终核对数据源的列名: 这是避免数据无法填充变量的最重要步骤。无论是通过查看原始CSV文件,还是通过 console.log(parsedData[0]) 来检查PapaParse的输出,都要确保代码中使用的键名与CSV实际的列名完全一致。
  • 错误处理: 在fetch请求和数据解析过程中加入健壮的错误处理机制,例如检查网络响应状态、捕获解析错误等,可以提高应用程序的稳定性。
  • 数据类型转换: 从CSV解析出的数据默认都是字符串。根据需要,务必将其转换为正确的数值、布尔或其他类型,并进行有效性检查。
  • 使用 let 或 const: 在现代JavaScript中,推荐使用 let 和 const 替代 var 来声明变量,以更好地管理变量作用域。
  • 用户体验: 考虑在页面上显示加载状态、错误消息或“未找到数据”的提示,而不仅仅是输出到控制台。
  • API限制: 如果是从公共API获取数据,请注意其速率限制和使用条款。

6. 总结

通过本教程,我们学习了如何使用JavaScript的fetch API和PapaParse库从远程API获取和解析CSV数据。解决变量无法正确填充数据的关键在于仔细核对CSV文件的实际列名,并确保代码中以正确的方式访问这些列。遵循这些步骤和最佳实践,您将能够高效、准确地处理各种CSV数据源,并将数据无缝集成到您的Web应用程序中。

相关专题

更多
js获取数组长度的方法
js获取数组长度的方法

在js中,可以利用array对象的length属性来获取数组长度,该属性可设置或返回数组中元素的数目,只需要使用“array.length”语句即可返回表示数组对象的元素个数的数值,也就是长度值。php中文网还提供JavaScript数组的相关下载、相关课程等内容,供大家免费下载使用。

557

2023.06.20

js刷新当前页面
js刷新当前页面

js刷新当前页面的方法:1、reload方法,该方法强迫浏览器刷新当前页面,语法为“location.reload([bForceGet]) ”;2、replace方法,该方法通过指定URL替换当前缓存在历史里(客户端)的项目,因此当使用replace方法之后,不能通过“前进”和“后退”来访问已经被替换的URL,语法为“location.replace(URL) ”。php中文网为大家带来了js刷新当前页面的相关知识、以及相关文章等内容

394

2023.07.04

js四舍五入
js四舍五入

js四舍五入的方法:1、tofixed方法,可把 Number 四舍五入为指定小数位数的数字;2、round() 方法,可把一个数字舍入为最接近的整数。php中文网为大家带来了js四舍五入的相关知识、以及相关文章等内容

754

2023.07.04

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

478

2023.09.01

JavaScript转义字符
JavaScript转义字符

JavaScript中的转义字符是反斜杠和引号,可以在字符串中表示特殊字符或改变字符的含义。本专题为大家提供转义字符相关的文章、下载、课程内容,供大家免费下载体验。

454

2023.09.04

js生成随机数的方法
js生成随机数的方法

js生成随机数的方法有:1、使用random函数生成0-1之间的随机数;2、使用random函数和特定范围来生成随机整数;3、使用random函数和round函数生成0-99之间的随机整数;4、使用random函数和其他函数生成更复杂的随机数;5、使用random函数和其他函数生成范围内的随机小数;6、使用random函数和其他函数生成范围内的随机整数或小数。

1031

2023.09.04

如何启用JavaScript
如何启用JavaScript

JavaScript启用方法有内联脚本、内部脚本、外部脚本和异步加载。详细介绍:1、内联脚本是将JavaScript代码直接嵌入到HTML标签中;2、内部脚本是将JavaScript代码放置在HTML文件的`<script>`标签中;3、外部脚本是将JavaScript代码放置在一个独立的文件;4、外部脚本是将JavaScript代码放置在一个独立的文件。

658

2023.09.12

Js中Symbol类详解
Js中Symbol类详解

javascript中的Symbol数据类型是一种基本数据类型,用于表示独一无二的值。Symbol的特点:1、独一无二,每个Symbol值都是唯一的,不会与其他任何值相等;2、不可变性,Symbol值一旦创建,就不能修改或者重新赋值;3、隐藏性,Symbol值不会被隐式转换为其他类型;4、无法枚举,Symbol值作为对象的属性名时,默认是不可枚举的。

554

2023.09.20

html编辑相关教程合集
html编辑相关教程合集

本专题整合了html编辑相关教程合集,阅读专题下面的文章了解更多详细内容。

38

2026.01.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
React 教程
React 教程

共58课时 | 3.9万人学习

TypeScript 教程
TypeScript 教程

共19课时 | 2.3万人学习

Bootstrap 5教程
Bootstrap 5教程

共46课时 | 3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号