0

0

如何从CSV API中准确提取和处理数据:JavaScript实践指南

碧海醫心

碧海醫心

发布时间:2025-10-22 11:17:46

|

952人浏览过

|

来源于php中文网

原创

如何从CSV API中准确提取和处理数据:JavaScript实践指南

本文旨在解决从csv格式的api获取数据时,变量填充失败的问题。我们将深入探讨如何正确识别csv数据源的列名,利用`fetch` api和`papaparse`库进行数据获取、解析、筛选和类型转换,最终实现数据的准确提取和在控制台的展示,并提供一套完整的javascript代码实践方案。

在现代Web开发中,从外部API获取数据是常见的任务。当API返回的数据是CSV格式时,正确地解析和提取所需信息至关重要。许多开发者在尝试将API数据填充到JavaScript变量时遇到困难,常见的原因是未能准确识别CSV数据源中的列名。本教程将通过一个具体的案例,详细讲解如何解决这类问题。

核心挑战:API数据变量填充失败的原因分析

当尝试从CSV API获取数据并将其存储到变量中时,如果变量始终为空或未按预期工作,最常见的原因是代码中引用的数据字段名与CSV文件实际的列名不匹配。

以本案例为例,原始代码尝试使用 row["INSTNM"]、row["CURROPER"] 和 row["TUITIONFEE_IN"] 来访问数据。然而,提供的CSV文件 (https://raw.githubusercontent.com/rfordatascience/tidytuesday/master/data/2020/2020-03-10/tuition_cost.csv) 实际的头部(列名)是 name、degree_length 和 in_state_tuition 等。这种不匹配导致 PapaParse 解析后的数据对象中找不到对应的属性,从而使得变量无法被正确填充。

关键点: 始终验证API返回数据的实际结构,特别是CSV文件的列头。

立即学习Java免费学习笔记(深入)”;

解决方案:正确识别与处理CSV数据

为了克服上述挑战,我们需要调整数据访问逻辑,使其与CSV文件的实际列名保持一致。以下是详细的步骤和代码实现。

1. 获取API数据并进行初步解析

首先,我们使用fetch API获取CSV文件的内容,然后利用PapaParse库将其解析为JavaScript对象数组。PapaParse是一个功能强大的CSV解析器,能够轻松处理复杂的CSV数据。

// Function to retrieve school information
function getSchoolInformation() {
  const schoolName = document.getElementById("schoolName").value;
  console.log("尝试查询学校:", schoolName); // 辅助调试
  fetch('https://raw.githubusercontent.com/rfordatascience/tidytuesday/master/data/2020/2020-03-10/tuition_cost.csv')
    .then(response => {
      if (!response.ok) {
        throw new Error(`HTTP error! status: ${response.status}`);
      }
      return response.text();
    })
    .then(csvData => {
      const schoolInfo = findSchoolInformation(schoolName, csvData);
      displaySchoolInformation(schoolInfo);
    })
    .catch(error => {
      console.error('获取或解析数据时发生错误:', error);
    });
}

代码解析:

  • getSchoolInformation(): 这是整个流程的入口点,当用户点击按钮时触发。
  • document.getElementById("schoolName").value: 获取用户输入的学校名称。
  • fetch(): 发起网络请求获取CSV文件内容。
  • .then(response => response.text()): 将响应转换为纯文本格式。
  • .then(csvData => ...): 接收CSV文本数据,并调用 findSchoolInformation 进行处理。
  • .catch(error => ...): 捕获网络请求或数据处理过程中可能发生的错误。

2. 确定正确的CSV列名

这是解决问题的核心步骤。在 findSchoolInformation 函数中,我们使用 PapaParse.parse() 方法解析CSV数据。解析后,parsedData 将是一个对象数组,每个对象代表CSV的一行,其属性名就是CSV的列头。

一键职达
一键职达

AI全自动批量代投简历软件,自动浏览招聘网站从海量职位中用AI匹配职位并完成投递的全自动操作,真正实现'一键职达'的便捷体验。

下载

我们需要根据CSV文件的实际列名来访问数据。通过查看原始CSV文件,我们可以确定正确的列名是 name、degree_length 和 in_state_tuition。

// Function to find school information based on school name
function findSchoolInformation(schoolName, csvData) {
  const parsedData = Papa.parse(csvData, {
    header: true,          // 告诉PapaParse第一行是列头
    skipEmptyLines: true   // 跳过空行
  }).data;

  const schoolInfo = [];

  parsedData.forEach(function(row) {
    // 修正:使用CSV文件中实际的列名
    const collegeName = row.name;
    const degreeLength = row.degree_length;
    const tuitionCost = row.in_state_tuition;

    // 进行大小写不敏感的学校名称匹配
    if (collegeName && collegeName.toLowerCase() === schoolName.toLowerCase()) {
      // 匹配成功后,对数据进行类型转换
      const parsedDegreeLength = parseInt(degreeLength);
      const parsedTuitionCost = parseFloat(tuitionCost);

      // 确保转换后的数据是有效的数字
      if (!isNaN(parsedDegreeLength) && !isNaN(parsedTuitionCost)) {
        schoolInfo.push({
          collegeName: collegeName.toLowerCase(), // 统一存储为小写
          degreeLength: parsedDegreeLength,
          tuitionCost: parsedTuitionCost
        });
      }
    }
  });
  console.log('找到的学校信息:', schoolInfo); // 辅助调试
  return schoolInfo;
}

代码解析:

  • Papa.parse(csvData, { header: true, skipEmptyLines: true }).data: 解析CSV数据。header: true 告诉 PapaParse 使用第一行作为对象的键。
  • row.name, row.degree_length, row.in_state_tuition: 使用点表示法(或方括号表示法 row['name'])访问对应列的数据。
  • collegeName.toLowerCase() === schoolName.toLowerCase(): 进行大小写不敏感的字符串比较,提高匹配的健壮性。
  • parseInt() 和 parseFloat(): 将从CSV中读取的字符串数据转换为数字类型,以便后续的计算或显示。
  • !isNaN(): 检查转换后的数据是否为有效数字,防止因无效数据导致程序错误。

3. 数据展示

最后,我们将筛选并处理过的学校信息展示在控制台。

// Function to display school information in the console
function displaySchoolInformation(schoolInfo) {
  if (schoolInfo.length === 0) {
    console.log("未找到匹配的学校信息。");
    return;
  }

  console.log("\n--- 查询结果 ---");
  for (let i = 0; i < schoolInfo.length; i++) {
    const collegeName = schoolInfo[i].collegeName;
    const degreeLength = schoolInfo[i].degreeLength;
    const tuitionCost = schoolInfo[i].tuitionCost;

    console.log("学校名称: " + collegeName);
    console.log("学制长度: " + degreeLength + " 年");
    console.log("州内学费: $" + tuitionCost.toFixed(2)); // 格式化学费为两位小数
    console.log("------------------------------");
  }
}

代码解析:

  • if (schoolInfo.length === 0): 增加一个判断,当没有找到匹配的学校时给出提示。
  • for (let i = 0; i
  • tuitionCost.toFixed(2): 将学费格式化为两位小数,提高可读性。

4. 前端交互与HTML结构

为了让用户能够输入学校名称并触发查询,我们需要一个简单的HTML页面。




    
    
    学校信息查询
    
    


    
    
    

    

HTML解析:

  • : 引入 PapaParse 库。
  • : 一个文本输入框,用于输入学校名称,并设置了默认值方便测试。
  • : 一个按钮,点击时调用 getSchoolInformation 函数。

注意事项

  1. 验证数据源: 在处理任何外部数据之前,务必验证其结构和字段名。对于CSV文件,可以直接下载查看其头部,或查阅API文档。
  2. 错误处理: 在fetch操作中添加.catch()块是至关重要的,它能捕获网络错误或API响应问题。
  3. 使用 let 或 const: 在现代JavaScript中,推荐使用 let 和 const 替代 var 来声明变量,以避免潜在的作用域问题和提高代码可读性。
  4. 数据类型转换: 从CSV读取的数据通常是字符串。在进行数值比较、计算或特定显示格式化之前,需要进行适当的类型转换(如 parseInt()、parseFloat())。
  5. 大小写敏感性: 在进行字符串比较时(例如学校名称),通常需要转换为统一的大小写(如 toLowerCase())以确保匹配的准确性。
  6. 代码调试: 善用 console.log() 在关键步骤输出变量值,可以帮助快速定位问题。

总结

通过本教程,我们了解了从CSV格式API中提取数据时,变量填充失败的常见原因及其解决方案。核心在于准确识别CSV数据的列名,并结合fetch API进行数据获取,PapaParse进行高效解析,以及细致的数据筛选和类型转换。遵循这些实践,可以确保从API获取的数据能够被正确地处理和利用,从而构建出更加健壮和可靠的Web应用程序。

相关专题

更多
js获取数组长度的方法
js获取数组长度的方法

在js中,可以利用array对象的length属性来获取数组长度,该属性可设置或返回数组中元素的数目,只需要使用“array.length”语句即可返回表示数组对象的元素个数的数值,也就是长度值。php中文网还提供JavaScript数组的相关下载、相关课程等内容,供大家免费下载使用。

557

2023.06.20

js刷新当前页面
js刷新当前页面

js刷新当前页面的方法:1、reload方法,该方法强迫浏览器刷新当前页面,语法为“location.reload([bForceGet]) ”;2、replace方法,该方法通过指定URL替换当前缓存在历史里(客户端)的项目,因此当使用replace方法之后,不能通过“前进”和“后退”来访问已经被替换的URL,语法为“location.replace(URL) ”。php中文网为大家带来了js刷新当前页面的相关知识、以及相关文章等内容

396

2023.07.04

js四舍五入
js四舍五入

js四舍五入的方法:1、tofixed方法,可把 Number 四舍五入为指定小数位数的数字;2、round() 方法,可把一个数字舍入为最接近的整数。php中文网为大家带来了js四舍五入的相关知识、以及相关文章等内容

756

2023.07.04

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

479

2023.09.01

JavaScript转义字符
JavaScript转义字符

JavaScript中的转义字符是反斜杠和引号,可以在字符串中表示特殊字符或改变字符的含义。本专题为大家提供转义字符相关的文章、下载、课程内容,供大家免费下载体验。

514

2023.09.04

js生成随机数的方法
js生成随机数的方法

js生成随机数的方法有:1、使用random函数生成0-1之间的随机数;2、使用random函数和特定范围来生成随机整数;3、使用random函数和round函数生成0-99之间的随机整数;4、使用random函数和其他函数生成更复杂的随机数;5、使用random函数和其他函数生成范围内的随机小数;6、使用random函数和其他函数生成范围内的随机整数或小数。

1071

2023.09.04

如何启用JavaScript
如何启用JavaScript

JavaScript启用方法有内联脚本、内部脚本、外部脚本和异步加载。详细介绍:1、内联脚本是将JavaScript代码直接嵌入到HTML标签中;2、内部脚本是将JavaScript代码放置在HTML文件的`<script>`标签中;3、外部脚本是将JavaScript代码放置在一个独立的文件;4、外部脚本是将JavaScript代码放置在一个独立的文件。

659

2023.09.12

Js中Symbol类详解
Js中Symbol类详解

javascript中的Symbol数据类型是一种基本数据类型,用于表示独一无二的值。Symbol的特点:1、独一无二,每个Symbol值都是唯一的,不会与其他任何值相等;2、不可变性,Symbol值一旦创建,就不能修改或者重新赋值;3、隐藏性,Symbol值不会被隐式转换为其他类型;4、无法枚举,Symbol值作为对象的属性名时,默认是不可枚举的。

554

2023.09.20

c++空格相关教程合集
c++空格相关教程合集

本专题整合了c++空格相关教程,阅读专题下面的文章了解更多详细内容。

0

2026.01.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
React 教程
React 教程

共58课时 | 4万人学习

TypeScript 教程
TypeScript 教程

共19课时 | 2.4万人学习

Bootstrap 5教程
Bootstrap 5教程

共46课时 | 3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号