WS实现搜狐新闻分类搜索
  bxzTbUwSHjCk 2023年11月19日 25 0

WS实现搜狐新闻分类搜索_保存文件

搜狐新闻是目前国内新闻平台中数一数二的,我们平时想要看什么样的新闻,找起来是不是比较麻烦呢?今天就给大家带来一个使用Play WS库编写的搜狐新闻的爬虫程序,想要看什么类型的新闻,只要通过它就可以轻松实现,一起来学习一下吧。

```scala
import play.api.libs.ws._
import scala.concurrent.ExecutionContext.Implicits.global
object Crawler {
def main(args: Array[String]): Unit = {
val ws = WS.url("https://news.sohu.com/")
val response = ws.get().map { response =>
response.header("Content-Type") match {
case "image/*" => {
val content = response.body
//保存图片数据到本地文件
val file = new.io.File("output.jpg")
.io.BufferedOutputStream(new.io.FileOutputStream(file)).write(content.array())
println(s"Image saved to ${file.getAbsolutePath}")
}
case _ => println("Not an image")
}
}
response.onComplete(_ => println("Request completed"))
}
}
```

请注意,这个程序需要在支持Scala和Play WS的环境中运行。此外,您需要确保您的系统上安装了正确的代理服务器软件,并且代理服务器设置正确,以便能够访问搜狐新闻。如果代理服务器设置不正确,程序可能无法正常运行。此外,您还需要确保程序具有足够的权限,以便能够保存文件到本地文件系统。如果程序没有足够的权限,它可能无法保存文件。

【版权声明】本文内容来自摩杜云社区用户原创、第三方投稿、转载,内容版权归原作者所有。本网站的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@moduyun.com

  1. 分享:
最后一次编辑于 2023年11月19日 0

暂无评论

推荐阅读
bxzTbUwSHjCk