求助，实时消息网页如何采集，软件协助浏览器无法显示网页内容

留言论坛

当前页面：熊猫智能采集软件> 留言论坛

发新贴

求助，实时消息网页如何采集，软件协助浏览器无法显示网页内容

作者： hw7655

| 阅读： 17921/5

2016/4/13 15:01:50

求助各位，目标采集网站地址：http://www.jinrongjiajia.com/#/infolist
采集软件协助浏览器页面显示“You are using an outdated browser. Please upgrade your browser to improve your experie”

请问如何采集实时消息，并且将每条消息存为一条数据库记录？

2 楼：管理员

2016/4/13 17:24:24

这个网站的列表，采用的是一种不常见的POST模式，暂且无法模拟。

但可以通过如下网址来获取对方的最新刷新的几条资讯：
http://121.199.59.124:8499/signalr/poll?transport=longPolling&clientProtocol=1.5&connectionToken=AQAAANCMnd8BFdERjHoAwE%2FCl%2BsBAAAA40PD8Qvm7k2cyirdGkVk9gAAAAACAAAAAAAQZgAAAAEAACAAAAB71sLuC1vlhG%2FRIBQp45NclN6ocKWSn643WtAmLQu6FgAAAAAOgAAAAAIAACAAAADEcqerPaho24daPIB72cCbPER%2Bcx6SJvTZCRmUhu25tjAAAACsNoBavlOfPpksZy%2FOTUguq9Jc1gl45PtqgeDdpLbE9vZHfOvdcM%2FM3FBc3GnnRMFAAAAAuXtLigRnkw0FbgblsvdXFDJuSFR6dN7E6TIme8nEmwUO3GqEBzVtcj0f3sY9DrcnDYITnfFO8Nw6E%2Fn59SttwA%3D%3D&connectionData=%5B%7B%22name%22%3A%22infopublishhub%22%7D%5D

POST参数：
messageId=d-856A4577-B,0|MVq,2|MVr,1

可以不带COOKIE，

3 楼： hw7655

2016/4/14 12:30:42

谢谢管理回复，没有采集成功，我换了另一个新浪财经网站，但无法以一条消息对应一条数据记录存储；
只选择一条记录，软件只能采集一条记录

如果命中多项，就会以复合语句形式，多条消息存储一条数据

内容页选择当前列表

.png|$|

4 楼： hw7655

2016/4/14 12:43:10

请问如何采集实时消息，并且将每条消息存为一条数据库记录？
采集网站：http://live.sina.com.cn/zt/f/v/finance/globalnews1

5 楼： hw7655

2016/4/14 23:08:02

经过尝试，通过父子表的方式已经达到目的，将每条消息存在字表中。

6 楼：管理员

2016/4/15 8:39:06

很不错了，能想到用父子表功能来实现。

验证码：

售前咨询QQ：	2607374426
贴牌OEM/合作(等)：	360560565


	手机：	171 9219 7361
	贴牌OEM/合作(等)：	139 1618 6547

	熊猫采集软件试用版下载
	熊猫采集软件购买
	熊猫采集软件操作演示视频
	如何采集企业名录、电话联系人

	123jlxie@163.com
	360560565@qq.com