R语言对Web数据操作实例

 更新时间:2021年05月01日 15:30:05   作者:w3cschool  
在本篇文章里小编给大家整理的是一篇关于R语言对Web数据操作实例内容,有兴趣的朋友们可以学习下。

许多网站提供数据供其用户使用。 例如,世界卫生组织(WHO)以CSV,txt和XML文件的形式提供健康和医疗信息的报告。 使用R语言程序,我们可以从这些网站以编程方式提取特定数据。 R语言中用于从网站中提取数据的一些包是“RCurl”,XML“和”stringr“,它们用于连接到URL,识别文件所需的链接并将它们下载到本地环境。

安装R语言的包

处理URL和链接到文件需要以下的包。 如果它们在R语言环境中不可用,您可以使用以下命令安装它们。

install.packages("RCurl")
install.packages("XML")
install.packages("stringr")
install.packages("plyr")

输入数据

我们将访问URL天气数据,并使用R在2015年下载CSV文件。

我们将使用函数getHTMLLinks()来收集文件的URL。 然后我们将使用函数downlaod.file()将文件保存到本地系统。 由于我们将对多个文件一次又一次地应用相同的代码,因此我们将创建一个被多次调用的函数。 文件名作为参数以R列表对象的形式传递到此函数。

# Read the URL.
url <- "http://www.geos.ed.ac.uk/~weather/jcmb_ws/"

# Gather the html links present in the webpage.
links <- getHTMLLinks(url)

# Identify only the links which point to the JCMB 2015 files. 
filenames <- links[str_detect(links, "JCMB_2015")]

# Store the file names as a list.
filenames_list <- as.list(filenames)

# Create a function to download the files by passing the URL and filename list.
downloadcsv <- function (mainurl,filename) {
   filedetails <- str_c(mainurl,filename)
   download.file(filedetails,filename)
}

# Now apply the l_ply function and save the files into the current R working directory.
l_ply(filenames,downloadcsv,mainurl = "http://www.geos.ed.ac.uk/~weather/jcmb_ws/")

验证文件下载

运行上述代码后,您可以在当前R语言工作目录中找到以下文件。

"JCMB_2015.csv" "JCMB_2015_Apr.csv" "JCMB_2015_Feb.csv" "JCMB_2015_Jan.csv"
   "JCMB_2015_Mar.csv"

到此这篇关于R语言对Web数据操作实例的文章就介绍到这了,更多相关R语言Web数据实操内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • R语言中data.frame的常用操作总结

    R语言中data.frame的常用操作总结

    这篇文章主要介绍了R语言中data.frame的常用操作总结,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-04-04
  • R语言关于多重回归知识点总结

    R语言关于多重回归知识点总结

    在本篇内容里小编给大家整理了一篇关于R语言关于多重回归知识点总结,有兴趣的朋友们可以学习下。
    2021-05-05
  • R语言环状热力图的画法

    R语言环状热力图的画法

    环状热力图是一种以环状布局展示数据的可视化方法,本文主要介绍了R语言环状热力图的画法,具有一定的参考价值,感兴趣的可以了解一下
    2024-02-02
  • R语言中矩阵matrix和数据框data.frame的使用详解

    R语言中矩阵matrix和数据框data.frame的使用详解

    这篇文章主要介绍了R语言中矩阵matrix和数据框data.frame的使用详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2021-03-03
  • R语言关于泊松回归知识点总结

    R语言关于泊松回归知识点总结

    在本篇文章里小编给大家分享的是一篇关于R语言关于泊松回归知识点总结内容,有兴趣的朋友们可以学习下。
    2021-05-05
  • R语言数据重塑知识点总结

    R语言数据重塑知识点总结

    在本篇文章里小编给大家整理的是一篇关于R语言数据重塑的相关知识点内容,有兴趣的朋友们可以跟着学习下。
    2021-03-03
  • R语言数据类型和对象深入讲解

    R语言数据类型和对象深入讲解

    这篇文章主要介绍了R语言数据类型和对象深入讲解,文中列举的实例讲解的很清楚,有感兴趣的同学可以学习下
    2021-03-03
  • R语言学习RcppEigen进行矩阵运算

    R语言学习RcppEigen进行矩阵运算

    这篇文章主要为大家介绍了R语言学习如何利用RcppEigen进行矩阵运算的实现方式,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步
    2021-11-11
  • R语言决策基础知识点详解

    R语言决策基础知识点详解

    在本篇文章里小编给大家整理了一篇关于R语言决策基础知识点内容,有兴趣的朋友们可以学习参考下。
    2021-03-03
  • R语言数据可视化tidyr与ggplot2多个变量分层展示举例实现

    R语言数据可视化tidyr与ggplot2多个变量分层展示举例实现

    这篇文章主要为大家介绍了R语言可视化tidyr与ggplot2多个变量的分层展示,实现过程文中通过举例为大家进行了详解,有需要的朋友可以借鉴参考下
    2021-11-11

最新评论