采集企业资料（百度企业信用）

上面这么多步骤就是为了获取单个企业资料的地址

https://xin.baidu.com/detail/compinfo?pid=xlTM-TogKuTw6z4J*w88WFbKmUJKdh0rPQmd

通过F12，我们可以得知，基本信息等栏目是异步加载的，再看看加载地址，很好，是json格式，省得抓数据了

https://xin.baidu.com/detail/basicAjax?pid=xlTM-TogKuTw6z4J*w88WFbKmUJKdh0rPQmd&tot=xlTM-TogKuTwm7dKkldZtVZ48S-eo2rlXwmd&_=1545040455762

测试后，tot是必须的参数，这时候就利用浏览器全文搜索功能搜索值“xlTM-TogKuTwm7dKkldZtVZ48S-eo2rlXwmd”，看看有没有在哪里出现过

结果让人很失望的，看了下cookie，里面也没有出现，那就只能搜索tot来定位增加参数的方法了

这里我们可以得知tot=window.tk，通过搜索window.tk，可以在网页源代码里面找到生成方法

主要2个参数：tk和baiducode

baiducode：企业百度信用代码，其实就是相当于企业ID，这个获取方式是固定的，读取html节点id=baiducode获取

tk:这个就比较狡猾了，节点id随机，属性也是随机的，在这里我分享下我的方法

万能的截取字符串方法

        public string GetKey(string lkey, string rkey, string html, StringComparison comparisonType = StringComparison.CurrentCultureIgnoreCase)
        {
            try
            {
                int lg = html.IndexOf(lkey, comparisonType);
                if (lg == -1)
                    return "";
                int rg = html.IndexOf(rkey, lg + lkey.Length, comparisonType);
                return html.Substring(lg + lkey.Length, rg - lg - lkey.Length);
            }
            catch
            {
                return "";
            }
        }

通过头尾关键字，最终得到属性aJf4eCK，再通过aJf4eCK="关键字获得tk

2个参数都搞定了，直接执行js方法就可以获得参数了

此处再分享个万能的C#执行JS方法

        public string RunJS(string jsCode, string procedureName, params object[] args)
        {
            MSScriptControl.ScriptControl sc = new MSScriptControl.ScriptControl();
            sc.Language = "JavaScript";
            sc.AddCode(jsCode);
            object obj = sc.Run(procedureName, args);
            return obj.ToString();
        }

做到这里，你会发现，换个企业url，计算出来的tot跟F12加载的根本不一样，why？

百度开发人员还是很狡猾的，js方法mix也是随机的，所以mix方法也只能动态获取（同样通过万能的关键字截取法）

ok，到这里可以顺利采集到企业信息了

访问频繁了，会让你登录验证身份，对于这块相信你可以搞定（adsl拨号服务器、IP代理等手段）

第一次分享教程，语言组织很差，没办法技术码农文笔就是这样⊙﹏⊙‖∣

原创：https://www.cnblogs.com/wangjiayuan/p/10133082.html