欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

powershell网络蜘蛛解决乱码问题

程序员文章站 2022-03-04 15:29:09
抓取(爬取)网上信息的脚本程序,俗称网络蜘蛛。 powershell中自带了这样的两个命令,【invoke-webrequest】和【invoke-restmethod】...

抓取(爬取)网上信息的脚本程序,俗称网络蜘蛛。
powershell中自带了这样的两个命令,【invoke-webrequest】和【invoke-restmethod】,但这两个命令有时候会乱码。

现在转帖分享, 某个【歪果仁】写的脚本。来源于 墙外出处:

核心代码

原文函数

powershell function you can use for reading utf8 encoded html pages content. the built in invoke-webrequest and invoke-restmethod fail miserably.