动网论坛采集实例

┆死┆

<DIV>
<P>本采集方法针对动网最新Version 7.1.0 Sp1 ，如采其它版本可能略有不同，请按实际进行调整更改。<BR>由于时间有限，本人不做详细说明了，直接将每个步骤抓图为示。</P>
<P>以动网官方论坛 电脑爱好者版为例，采集如下页面：<BR><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;action=&amp;topicmode=0&amp;page=4" target=_blank><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;action=&amp;topicmode=0&amp;page=4" target=_blank><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;action=&amp;topicmode=0&amp;page=4" target=_blank><U><FONT color=#0000ff>http://bbs.dvbbs.net/index.asp?boardid=18&amp;action=&amp;topicmode=0&amp;page=4</FONT></U></A></A></A><BR>为了方便，我进行了简化地址，先将多余的参数去掉改成：<BR><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;page=4" target=_blank><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;page=4" target=_blank><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;page=4" target=_blank><U><FONT color=#0000ff>http://bbs.dvbbs.net/index.asp?boardid=18&amp;page=4</FONT></U></A></A></A></P>
<P>打开采集专家。<BR>首先，新建一个任务。<BR>先填写任务名称和线程数，然后点批量添加按钮， 这时会出批量添加窗口<BR></P></DIV>
<P><IMG onmousewheel="return bbimg(this)" height=415 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314180711712.gif" width=511 onload=javascript:resizepic(this) border=0></P>
<P>在网址前辍里输入：<A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;page" target=_blank><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;page" target=_blank><A href="http://bbs.dvbbs.net/index.asp?boardid=18&amp;page" target=_blank><U><FONT color=#0000ff>http://bbs.dvbbs.net/index.asp?boardid=18&amp;page</FONT></U></A></A></A>=<BR>把最后的页数ID去掉<BR>起始值和终止值就是从哪页采到哪页的，请按实际填写。</P>
<P>然后点确定。</P>
<P>下面是网站登陆：<BR>一般要采集一个论坛我们需要先注册一个账号，以防有些贴子需要会员登陆才可以查看而我们没有权限采集。。<BR>点击网站登陆按钮会出现一个类似浏览器的窗口，直接在上面输入你要采集的地址，看是否已经登陆了，如果没有就在这里登陆一下，然后关闭窗口就可以了，软件会自动记下登陆的COOKIES信息。</P>
<P>全部设置完的页面如下图所示</P>
<P><BR></P><IMG onmousewheel="return bbimg(this)" height=563 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314180744345.gif" width=538 onload=javascript:resizepic(this) border=0>
<DIV class=postbottom1 id=postend>好了，“任务”标签里的选项做完了，我们按着进行“访问规则”的设置。<BR>这一步只需进行两个设置，在采集时接受页面的网址标识和采集对象所在页面标识里输入<BR>TopicOther (只对打印页进行采集)，然后点加入标识就可以。<BR><BR></DIV>
<P><BR><IMG onmousewheel="return bbimg(this)" height=570 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314180758487.gif" width=539 onload=javascript:resizepic(this) border=0></P>
<P>然后进入"信息采集标签"<BR>先随便打开一个贴子，然后点到它的打印页面，如：<A href="http://bbs.dvbbs.net/TopicOther.asp?t=5&amp;BoardID=18&amp;id=1167872" target=_blank><A href="http://bbs.dvbbs.net/TopicOther.asp?t=5&amp;BoardID=18&amp;id=1167872" target=_blank><A href="http://bbs.dvbbs.net/TopicOther.asp?t=5&amp;BoardID=18&amp;id=1167872" target=_blank><A href="http://bbs.dvbbs.net/TopicOther.asp?t=5&amp;BoardID=18&amp;id=1167872" target=_blank><U><FONT color=#0000ff>http://bbs.dvbbs.net/TopicOther.asp?t=5&amp;BoardID=18&amp;id=1167872</FONT></U></A></A></A></A><BR>查看它的网页源代码。</P>
<P>按如下图所示进行标题和内容的设置。</P>
<P><BR><A id=ImgSpan href="http://www.cz05.com/web/Article/UploadFiles/200703/20070314175908971.gif" target=_blank></A><BR><IMG onmousewheel="return bbimg(this)" height=561 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314180830795.gif" width=538 onload=javascript:resizepic(this) border=0></P>
<P><IMG onmousewheel="return bbimg(this)" height=566 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314180844795.gif" width=541 onload=javascript:resizepic(this) border=0><BR></P><A id=ImgSpan href="http://www.cz05.com/web/Article/UploadFiles/200703/20070314175908299.gif" target=_blank></A>
<P>接着进行定义特殊链接，获得贴子的ID，和采集的页面地址</P>
<P><IMG onmousewheel="return bbimg(this)" height=428 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314180949615.gif" width=688 onload=javascript:resizepic(this) border=0><BR><A id=ImgSpan href="http://www.cz05.com/web/Article/UploadFiles/200703/20070314180301928.gif" target=_blank></A></P>
<P>如下图所示设置<BR><BR><A id=ImgSpan href="http://www.cz05.com/web/Article/UploadFiles/200703/20070314175909449.gif" target=_blank></A></P>
<P><IMG onmousewheel="return bbimg(this)" height=415 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314181004118.gif" width=586 onload=javascript:resizepic(this) border=0>OK,设置完了，现在可以开始采集了，采集后打开数据库结果如下：</P>
<P><BR><BR><A id=ImgSpan href="http://www.cz05.com/web/Article/UploadFiles/200703/20070314175909179.gif" target=_blank></A></P>
<P><IMG onmousewheel="return bbimg(this)" height=373 src="http://www.cz05.com/web/Article/UploadFiles/200703/20070314181017813.gif" width=514 onload=javascript:resizepic(this) border=0>采集事项：<BR>1、请先在要采论坛注册账号，并且进行登陆<BR>2、采集前请先查询该论坛是否在搜索里已有大量收录<BR>3、由于一个站只采2－3万页面即可，ACCESS数据库完全可以胜任<BR>4、此软件还可以进行图片保存到本地等功能，请自行熟悉</P>
<P>采集思路为：<BR>1、先获取采集贴子的ID<BR>2、根据ID得出它的打印页面，然后进行采集</P>
<P>DISCUZ等论坛，采集模式大略相同，</P><BR><script language="JavaScript" src="http://www.16xx8.com/bbs/2.js"></script><BR>