浅谈ASP自动采集程序及入库
作者:郁郁小蝎 时间:2007-08-17 11:25:00
最近网上流行着一些采集程序,更多人拿着这些东西在网上叫卖,很多不太懂的人看着那些程序眼羡,其实如果你懂一些ASP,了解自动采集程序的原理后,你会感觉实现自动化也是那么的简单.
原理及优点:
通过XML中的XMLHTTP组件调用其它网站上的网页,然后批量截取或替换原有的信息使其转化成变量后再一一储存到数据库中。其主要的优点便是无需再手工添加大量的信息了,可以指定对某一个站信息的截取进行批量录入,达到省时省力的目的。与其单纯的ASP小偷程序不同的是:它已经不再依赖其目标网站。
简单事例:
<%
’声明取得目标信息的函数,通过XML组件进行实现。
Function GetURL(url)
Set Retrieval = CreateObject("Microsoft.XMLHTTP")
With Retrieval
.Open "GET", url, False
.Send
GetURL = bytes2bstr(.responsebody)
’对取得信息进行验证,如果信息长度小于100则说明截取失败
if len(.responsebody)<100 then
response.write "获取远程文件 <a href="&url&" target=_blank>"&url&"</a> 失败。"
response.end
end if
End With
Set Retrieval = Nothing
End Function
’ 二进制转字符串,否则会出现乱码的!
function bytes2bstr(vin)
strreturn = ""
for i = 1 to lenb(vin)
thischarcode = ascb(midb(vin,i,1))
if thischarcode < &h80 then
strreturn = strreturn & chr(thischarcode)
else
nextcharcode = ascb(midb(vin,i+1,1))
strreturn = strreturn & chr(clng(thischarcode) * &h100 + cint(nextcharcode))
i = i + 1
end if
next
bytes2bstr = strreturn
end function
’声明截取的格式,从Start开始截取,到Last为结束
Function GetKey(HTML,Start,Last)
filearray=split(HTML,Start)
filearray2=split(filearray(1),Last)
GetKey=filearray2(0)
End Function
Dim Softid,Url,Html,Title
’获取要取页面的ID
SoftId=Request("Id")
Url="http://www3.skycn.com/soft/"&SoftId&".html"
Html = GetURL(Url)
’以截取天空软件的软件名为例子
Title = GetKey(Html,"<font color=’#004FC6’ size=’3’>","</font></b></td></tr>")
’打开数据库,准备入库
dim connstr,conn,rs,sql
connstr="DBQ="+server.mappath("db1.mdb")+";DefaultDir=;DRIVER={Microsoft Access Driver (*.mdb)};"
set conn=server.createobject("ADODB.CONNECTION")
conn.open connstr
set rs=server.createobject("adodb.recordset")
sql="select [列名] from [表名] where [列名]=’"&Title&"’"
rs.open sql,conn,3,3
if rs.eof and rs.bof then
rs("列名")=Title
rs.update
set rs=nothing
end if
set rs=nothing
Response.Write"采集完毕!"
%>
标签:采集,XML,asp
0
投稿
猜你喜欢
Python的Django中将文件上传至七牛云存储的代码分享
2023-11-28 14:00:24
Python控制键盘鼠标pynput的详细用法
2021-08-01 07:52:14
无缝滚动js代码通俗易懂(自写)
2023-07-02 05:23:49
pymysql实现增删改查的操作指南(python)
2024-01-20 08:04:04
关于golang 字符串 int uint int64 uint64 互转问题
2023-07-13 17:52:44
springBoot下实现java自动创建数据库表
2024-01-24 12:26:31
Python Numpy 数组的初始化和基本操作
2022-08-28 22:18:23
asp如何实现页面执行时间及搜索时间
2007-11-12 22:48:00
python Dijkstra算法实现最短路径问题的方法
2022-02-21 03:08:51
Windows11下MySQL 8.0.29 安装配置方法图文教程
2024-01-24 09:20:40
javascript的var与let,const之间的区别详解
2024-05-09 15:06:41
PHP在线生成二维码代码(google api)
2024-05-05 09:18:08
Python实现简单的文件传输与MySQL备份的脚本分享
2024-01-21 04:44:44
利用Python制作一个愚人节整蛊消息框
2022-08-07 22:06:53
软件测试面试如何测试网页的登录页面
2023-12-10 20:45:30
解决python中使用plot画图,图不显示的问题
2021-09-27 16:00:07
从django的中间件直接返回请求的方法
2022-02-04 23:32:23
python中进程间通信及设置状态量控制另一个进程
2022-01-28 08:02:57
oracle join on 数据过滤问题
2009-07-14 21:17:00
10个Python小技巧你值得拥有
2022-02-03 16:28:56