asp.net自动采集
求思路，在b/s架构下实现自动采集新闻，注意自动两个字。问题在于，当服务器没访问的时候，这个时候怎么实现采集。例如ie关闭了。

[解决办法]
写个winform程序或windows服务放在后台.

[解决办法]
为什么要用B/S？
[解决办法]
在Application_start中加一个timer循环去做.

[解决办法]
在Application_start中加一个timer循环去做.
[解决办法]
//PUSH登录的用户名和密码
MSXML2.XMLHTTP req = new MSXML2.XMLHTTP();
string query = "callCount=1" + (char)13 + (char)10 + "c0-scriptName=SecurityAccess" + (char)13 + (char)10 + "c0-methodName=validate" + (char)13 + (char)10 + "c0-id=990_1180409315890" + (char)13 + (char)10 + "c0-param0=string:cx_330300" + (char)13 + (char)10 + "c0-param1=string:123456" + (char)13 + (char)10 + "c0-param2=null:null" + (char)13 + (char)10 + "xml=true";
req.open("POST", " http://10.1.0.3/JDApp/dwr/exec/SecurityAccess.validate.dwr ", false, "", "");
req.setRequestHeader("Content-Type", "text/plain");
req.send(query);

MSXML2.XMLHTTP Zpages = new MSXML2.XMLHTTP();
Zpages.open("GET", "http://10.1.0.3/JDApp/enterprise/enterpriseListAction.do?searchChilds=true&method=manageList&areaId=20050124181116206783432593202462", false, "", "");
Zpages.send("");

//获取总页数
Byte[] cons = (Byte[])Zpages.responseBody;
string HtmlCodes = System.Text.ASCIIEncoding.GetEncoding("GB2312").GetString(cons, 0, cons.Length);
Match z = Regex.Match(HtmlCodes, @"页次：<b>(?<pageid>[^<]*)</b>页/<b>(?<pages>[^<]*)", RegexOptions.IgnoreCase);
int pagesz=Convert.ToInt32( z.Groups["pages"].Value);

//翻页
for (int pageid = 1; pageid <= 2; pageid++)
{

MSXML2.XMLHTTP oBao = new MSXML2.XMLHTTP();
oBao.open("GET", "http://wwww.aaa.com/JDApp/enterprise/enterpriseListAction.do?method=manageList&areaId=20050124181116206783432593202462&pageId=" + (int)pageid + "", false, "", "");
oBao.send("");

Byte[] b1 = (Byte[])oBao.responseBody;
string HtmlCode1 = System.Text.ASCIIEncoding.GetEncoding("GB2312").GetString(b1, 0, b1.Length);

string yourStr = HtmlCode1;
yourStr = yourStr.Replace(" ", "");

Match H0 = Regex.Match(yourStr, @"PK0([""']?)\svalue=([""']?)(?<PK0>[^""']*)", RegexOptions.IgnoreCase);

if (H0.Groups["PK0"].Value != "") DetailData("" + H0.Groups["PK0"].Value + "");


oBao.abort();
}

//上传文件后记录更新时间"DM"模块名称
WebService webService = new WebService();
webService.DataUpDate("CJ");

Response.Write("采集成功|");
}




protected void DetailData(string pageid)
{
MSXML2.XMLHTTP Bao = new MSXML2.XMLHTTP();
Bao.open("GET", "http://10.1.0.3/JDApp/enterprise/view.jsp?id=" + pageid + "", false, "", "");
Bao.send("");

Byte[] b = (Byte[])Bao.responseBody;
string HtmlCode = System.Text.ASCIIEncoding.GetEncoding("GB2312").GetString(b, 0, b.Length);

string yourStr = HtmlCode;
yourStr = yourStr.Replace(" ", "");


Match H2 = Regex.Match(yourStr, @"通讯地址</td>\s*<td[^>]*>(?<txdz>[^<]*)</td>\s*<td[^>]*>[^<]*</td>\s*<td[^>]*>(?<yb>[^<]*)</td>\s*<td[^>]*>[^<]*</td>\s*<td[^>]*>(?<qywz>[^<]*)</td>\s*<td[^>]*>[^<]*</td>\s*<td[^>]*>(?<dzyx>[^<]*)</td>\s*<td[^>]*>[^<]*</td>\s*<td[^>]*>(?<lzzfzr>[^<]*)", RegexOptions.IgnoreCase);


string EntID = pageid;
string jgdm = (string)H1.Groups["jgdm"].Value;


String sqlStr = ConfigurationManager.ConnectionStrings["SOUcon"].ToString();
SqlConnection sqlConn = new SqlConnection(sqlStr);

//Insert采集到的记录
SqlCommand cmd = new SqlCommand("EntQualityInsert", sqlConn);
cmd.CommandType = CommandType.StoredProcedure;

cmd.Parameters.Add(new SqlParameter("@EntID", SqlDbType.VarChar, 50));


sqlConn.Open();
cmd.ExecuteNonQuery();
sqlConn.Close();

Bao.abort();

}


我在用的可以自动通过用户名cx密码123456登录一个WEB系统,再分析总页数,自动分页采集每行记录.

[解决办法]
不懂就学
[解决办法]
采集信息比较麻烦。我还没弄过。看看。也没好的解决方案啊

[解决办法]
貌似服务器端的运行与ie开不开都没关系，所以说application可行，或者说在服务器端写一个自动运行的程序也可以啊
如果是要客户端做这个过程就比较复杂了，你只好先学学黑客技术了~~

[解决办法]
关注!!!!!!
[解决办法]
帮你顶一下,最近也在关注这个问题
[解决办法]
mark
[解决办法]
一个页面也不开，就想实现程序自动采集，基于B/S模式，好像很难实现吧。

如果要用在虚拟主机，至少开一个页面。
[解决办法]
顶，关注
[解决办法]
当服务器没访问的时候，这个时候怎么实现采集。例如ie关闭了

关了还行?不太可能吧
不如你写个在后台运行的程序啊，用asp.net干这事不太合适
[解决办法]
呵，大猩猩的建议都被楼主驳回了。帮顶了~~