linux curl是通过url语法在命令行下上传或下载文件的工具软件,它支持http,https,ftp,ftps,telnet等多种协议,常被用来抓取网页和监控Web服务器状态。

一、Linux curl用法举例:
1. linux curl抓取网页:

抓取百度:

如发现乱码,可以使用iconv转码:

iconv的用法请参阅:在Linux/Unix系统下用iconv命令处理文本文件中文乱码问题


2. Linux curl使用代理

linux curl使用http代理抓取页面:

使用socks代理抓取页面:

代理服务器地址可以从爬虫代理上获取。


3. linux curl处理cookies

接收cookies:

发送cookies:


4. linux curl发送数据:

linux curl get方式提交数据:

linux curl post方式提交数据:

以表单的方式上传文件:

相当于设置form表单的method="POST"和enctype='multipart/form-data'两个属性。


5. linux curl http header处理:

设置http请求头信息:

设置http响应头处理:


6. linux curl认证:


6. 其他:


GitHub 加速计划 / li / linux-dash
13
2
下载
A beautiful web dashboard for Linux
最近提交(Master分支:4 个月前 )
186a802e added ecosystem file for PM2 5 年前
5def40a3 Add host customization support for the NodeJS version 5 年前
Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐