python 如何爬取url翻页不变的网址 40C

http://mzj.beijing.gov.cn/wssbweb/wssb/dc/searchOrgList.do?action=searchOrgList
我需要爬取这个网站每一家公司的详细信息,我的思路是通过这个主页面爬取所有详情页面的网址,然后再打开详情页面(公司详细信息页面)爬取需要的数据。我现在面临的问题是,这个网址翻页时网址没有发生变化,在网上查了很多方法都没有用,总是重复爬取第一页内容。
求各位大神赐教!!
这是我的代码:
图片说明

2个回答

post这个地址
http://mzj.beijing.gov.cn/wssbweb/wssb/dc/searchOrgList.do?action=searchOrgList
post的内容是
page_flag=true&goto_page=next&current_page=当前页面的编号的数字&total_count=15254&registrationDeptCode=&netTypeId=2&order=&status=&websitId=100&corporateType=&registrationNo=&orgName=&to_page=

比如current_page=1
返回如下:









<html>
<head>

<meta http-equiv="Content-Type" content="text/html; charset=gb2312" />

<link href="../css/stb-style.css" rel="stylesheet" type="text/css">
<link href="../css/column-style.css" rel="stylesheet" type="text/css">
<!-- <script   src="../lib/js.js"></script> -->
<!-- <script   src="../lib/js_1.js"></script> -->
<script src="../lib/function.js" ></script>
<script src="../lib/common.js" ></script>
<style type="text/css">
<!--
.STYLE1 {
    font-size: 14px;
    font-weight: bold;
}
-->
</style>
</head>
<body  scrolling="NO" style="overflow:scroll;">


<table width="1002" border="0" align="center" cellpadding="0" cellspacing="0">
  <tr>

    <td align="center" valign="top" class="info-mainbg">
<table width="96%" border="0" cellspacing="0" cellpadding="0">
      <tr>
        <td height="6" colspan="2" align="center"></td>
        </tr>
      <tr>
        <td width="4%" height="25" align="center"><img src="../images/info-tu_08.gif" width="11" height="13"></td>
        <td width="96%" valign="bottom" style="padding-bottom:2px;">
         <span class="STYLE1">社会组织检索</span>
        </td>
      </tr>
      <tr>
        <td height="1" colspan="2" bgcolor="#b56100"></td>
        </tr>
      <tr>
        <td height="2" colspan="2" bgcolor="#f0f0f0"></td>
        </tr>

    </table>
<table width="100%" border="0" cellspacing="0" cellpadding="0">
          <tr>
            <td width="4%">&nbsp;</td>
            <td width="92%" align="center" valign="bottom" bgcolor="#FFFFFF"><table width="98%" border="0" cellspacing="0" cellpadding="0">
              <tr>
                <td height="100" colspan="3" align="center" class="wszx-border01">
                  <table width="96%" border="0" cellpadding="1" cellspacing="1" bgcolor="#FFFFFF">
                    <form name="myform" method="post" action="searchOrgList.do?action=searchOrgList"> 
                    <input type="hidden" name="order" value=""/>
                    <input type="hidden" name="status" value=""/>
                            <input type="hidden" name="websitId" value="100"/>
                            <input type="hidden" name="netTypeId" value="2"/>
                     <tr>
                      <td height="25" align="right" bgcolor="#fdf6ed">社会组织名称:</td>
                      <td colspan="3" bgcolor="#fdf6ed">


                            <input name="orgName" type="text" id="orgName" size="70" maxlength="55" value="" class="zcfg_input">
                        </td>
                      </tr>

                    <tr>
                      <td width="15%" height="25" align="right" bgcolor="#fdf6ed">登记管理机关:<br></td>
                      <td width="37%" bgcolor="#fdf6ed">

                          <select name="registrationDeptCode">
<option value="" selected>===所有===</option>
<option value="42">北京市民政局</option>
<option value="1833">东城区民政局</option>
<option value="1839">西城区民政局</option>
<option value="1845">崇文区民政局</option>
<option value="1851">宣武区民政局</option>
<option value="1857">朝阳区民政局</option>
<option value="1863">海淀区民政局</option>
<option value="1943">密云区民政局</option>
<option value="1937">平谷区民政局</option>
<option value="1931">怀柔区民政局</option>
<option value="1869">丰台区民政局</option>
<option value="1925">延庆区民政局</option>
<option value="1919">大兴区民政局</option>
<option value="1913">房山区民政局</option>
<option value="1907">通州区民政局</option>
<option value="1901">门头沟区民政局</option>
<option value="1895">昌平区民政局</option>
<option value="1889">顺义区民政局</option>
<option value="1875">石景山区民政局</option>
</select>


                      </td>
                       <td height="25" align="right" bgcolor="#fdf6ed">登记证号:</td>
                      <td bgcolor="#fdf6ed">
                      <input name="registrationNo" type="text" size="20" class="zcfg_input" value="">
                      </td>
                    </tr>
                    <tr>
                      <td width="15%" height="25" align="right" bgcolor="#fdf6ed">社会组织类型:<br></td>
                      <td width="37%" bgcolor="#fdf6ed">

                        <select name="corporateType">
<option value="" selected>===所有===</option>
<option value="1">社会团体</option>
<option value="2">民办非企业单位</option>
<option value="3">基金会</option>
</select>



                      </td>
                      <td align="right" bgcolor="#fdf6ed">&nbsp;</td>
                      <td bgcolor="#fdf6ed">
                         <input type="image" name="imageField2" src="images/njjggg_22.gif" onClick="javascript:document.myform.registrationDeptCode.disabled='';"/>
                      </td>

                    </tr>

                     </form>
                  </table>                               
                </td>
              </tr>
            </table>
              <table width="100%" border="0" cellspacing="0" cellpadding="0">
                <tr>
                  <td>&nbsp;</td>
                </tr>
              </table>  
              <table width="98%" border="0" cellpadding="0" cellspacing="0" bgcolor="#b2d8f7">
                <tr>
                  <td bgcolor="#FFFFFF"><table width="100%" border="0" cellpadding="1" cellspacing="1" bordercolor="#FFFFFF" bgcolor="#FFFFFF">
                    <tr bgcolor="#f8e2cf">
                      <td width="4%" height="30" align="center" class="table-td-bt">序号</td>
                      <td width="30%" align="center" class="table-td-bt">名 称</td>
                      <td width="30%" align="center" class="table-td-bt">业务主管单位</td>
                      <td width="12%" align="center" class="table-td-bt">登记证号</td>
                      <td width="12%" align="center" class="table-td-bt">社会信用代码</td>
                      <td width="12%" align="center" class="table-td-bt">成立时间</td>
                    </tr>



                         <tr> 



                      <td height="22" align="center">21</td>
                      <td title="北京彤馨慈善基金会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017976&websitId=100&netTypeId=2" target="_blank">
                      北京彤馨慈善基金会
                      </a>
                      </td>
                      <td title="无">无</td>
                      <td align="center">0179783</td>
                      <td align="center">
                                            53110000MJ01797833

                                        </td>
                      <td align="center">2019-06-11</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">22</td>
                      <td title="北京同创医学发展基金会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017975&websitId=100&netTypeId=2" target="_blank">
                      北京同创医学发展基金会
                      </a>
                      </td>
                      <td title="无">无</td>
                      <td align="center">0179775</td>
                      <td align="center">
                                            53110000MJ01797758

                                        </td>
                      <td align="center">2019-06-11</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">23</td>
                      <td title="北京市丰台区夕盈社会工作事务所">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017974&websitId=100&netTypeId=2" target="_blank">
                      北京市丰台区夕盈社会工作事务所
                      </a>
                      </td>
                      <td title="北京市丰台区社会建设工作办公室">北京市丰台区社会建设工作办公室</td>
                      <td align="center">0275169</td>
                      <td align="center">
                                            52110106MJ02751696

                                        </td>
                      <td align="center">2019-06-10</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">24</td>
                      <td title="北京市密云区鼓楼街道德缘社会工作服务中心">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017973&websitId=100&netTypeId=2" target="_blank">
                      北京市密云区鼓楼街道德缘社会工...
                      </a>
                      </td>
                      <td title="密云区鼓楼街道办事处">密云区鼓楼街道办事处</td>
                      <td align="center">0389430</td>
                      <td align="center">
                                            52110118MJ0389430U

                                        </td>
                      <td align="center">2019-06-10</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">25</td>
                      <td title="北京市密云区西田各庄镇渤海寨村养老服务中心">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017972&websitId=100&netTypeId=2" target="_blank">
                      北京市密云区西田各庄镇渤海寨村...
                      </a>
                      </td>
                      <td title="密云区西田各庄镇人民政府">密云区西田各庄镇人民政府</td>
                      <td align="center">0389449</td>
                      <td align="center">
                                            52110118MJ0389449Q

                                        </td>
                      <td align="center">2019-06-10</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">26</td>
                      <td title="北京市密云区首职航空职业技能培训学校">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017971&websitId=100&netTypeId=2" target="_blank">
                      北京市密云区首职航空职业技能培...
                      </a>
                      </td>
                      <td title="密云区人力资源和社会保障局">密云区人力资源和社会保障局</td>
                      <td align="center">0389422</td>
                      <td align="center">
                                            52110118MJ03894221

                                        </td>
                      <td align="center">2019-06-10</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">27</td>
                      <td title="北京市西城区什刹海街道社会组织联合会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017970&websitId=100&netTypeId=2" target="_blank">
                      北京市西城区什刹海街道社会组织...
                      </a>
                      </td>
                      <td title="北京市西城区人民政府什刹海街道办事处">北京市西城区人民政府什刹海街道...</td>
                      <td align="center">0200474</td>
                      <td align="center">
                                            51110102MJ0200474P

                                        </td>
                      <td align="center">2019-04-29</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">28</td>
                      <td title="北京市西城区冰蹴球协会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017969&websitId=100&netTypeId=2" target="_blank">
                      北京市西城区冰蹴球协会
                      </a>
                      </td>
                      <td title="北京市西城区体育局">北京市西城区体育局</td>
                      <td align="center">0200482</td>
                      <td align="center">
                                            51110102MJ0200482J

                                        </td>
                      <td align="center">2019-05-30</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">29</td>
                      <td title="北京清源文化创意产业发展中心">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017968&websitId=100&netTypeId=2" target="_blank">
                      北京清源文化创意产业发展中心
                      </a>
                      </td>
                      <td title="北京市文化局">北京市文化局</td>
                      <td align="center">0166034</td>
                      <td align="center">
                                            52110000MJ0166034Y

                                        </td>
                      <td align="center">2019-06-05</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">30</td>
                      <td title="北京市顺义区东方雨虹职业技能培训学校">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017967&websitId=100&netTypeId=2" target="_blank">
                      北京市顺义区东方雨虹职业技能培...
                      </a>
                      </td>
                      <td title="北京市顺义区人力资源和社会保障局">北京市顺义区人力资源和社会保障...</td>
                      <td align="center">0329681</td>
                      <td align="center">
                                            52110113MJ0329681Q

                                        </td>
                      <td align="center">2019-06-05</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">31</td>
                      <td title="北京三奕国际学校">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017964&websitId=100&netTypeId=2" target="_blank">
                      北京三奕国际学校
                      </a>
                      </td>
                      <td title="北京市教育委员会">北京市教育委员会</td>
                      <td align="center">0166026</td>
                      <td align="center">
                                            52110000MJ01660264

                                        </td>
                      <td align="center">2019-06-05</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">32</td>
                      <td title="中关村药谷生物产业研究院">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017962&websitId=100&netTypeId=2" target="_blank">
                      中关村药谷生物产业研究院
                      </a>
                      </td>
                      <td title="无(中关村)">无(中关村)</td>
                      <td align="center">0166042</td>
                      <td align="center">
                                            52110000MJ0166042R

                                        </td>
                      <td align="center">2019-06-05</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">33</td>
                      <td title="北京吉安企业商会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017958&websitId=100&netTypeId=2" target="_blank">
                      北京吉安企业商会
                      </a>
                      </td>
                      <td title="无">无</td>
                      <td align="center">0122736</td>
                      <td align="center">
                                            51110000MJ01227364

                                        </td>
                      <td align="center">2019-05-27</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">34</td>
                      <td title="北京市顺义区赵全营晨曦社会工作事务所">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017957&websitId=100&netTypeId=2" target="_blank">
                      北京市顺义区赵全营晨曦社会工作...
                      </a>
                      </td>
                      <td title="北京市顺义区赵全营镇人民政府">北京市顺义区赵全营镇人民政府</td>
                      <td align="center">0329673</td>
                      <td align="center">
                                            52110113MJ0329673X

                                        </td>
                      <td align="center">2019-06-03</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">35</td>
                      <td title="北京市朝阳区菁未来小规模幼儿园">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017956&websitId=100&netTypeId=2" target="_blank">
                      北京市朝阳区菁未来小规模幼儿园
                      </a>
                      </td>
                      <td title="北京市朝阳区教育委员会">北京市朝阳区教育委员会</td>
                      <td align="center">0228063</td>
                      <td align="center">
                                            52110105MJ0228063E

                                        </td>
                      <td align="center">2019-05-28</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">36</td>
                      <td title="北京市朝阳区律谐律师调解中心">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017955&websitId=100&netTypeId=2" target="_blank">
                      北京市朝阳区律谐律师调解中心
                      </a>
                      </td>
                      <td title="北京市朝阳区司法局">北京市朝阳区司法局</td>
                      <td align="center">0228055</td>
                      <td align="center">
                                            52110105MJ0228055K

                                        </td>
                      <td align="center">2019-05-20</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">37</td>
                      <td title="北京市朝阳区海外高层次人才协会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017954&websitId=100&netTypeId=2" target="_blank">
                      北京市朝阳区海外高层次人才协会
                      </a>
                      </td>
                      <td title="中共北京市朝阳区委组织部">中共北京市朝阳区委组织部</td>
                      <td align="center">0220985</td>
                      <td align="center">
                                            51110105MJ02209853

                                        </td>
                      <td align="center">2019-05-30</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">38</td>
                      <td title="北京大运云链大数据应用研究院">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017953&websitId=100&netTypeId=2" target="_blank">
                      北京大运云链大数据应用研究院
                      </a>
                      </td>
                      <td title="无">无</td>
                      <td align="center">0166018</td>
                      <td align="center">
                                            52110000MJ01660189

                                        </td>
                      <td align="center">2019-05-27</td>

                    </tr>


                         <tr> 



                      <td height="22" align="center">39</td>
                      <td title="北京一路阳光慈善基金会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017952&websitId=100&netTypeId=2" target="_blank">
                      北京一路阳光慈善基金会
                      </a>
                      </td>
                      <td title="无">无</td>
                      <td align="center">0179759</td>
                      <td align="center">
                                            53110000MJ0179759J

                                        </td>
                      <td align="center">2019-05-27</td>

                    </tr>



                          <tr bgcolor="#fdf6ed"> 


                      <td height="22" align="center">40</td>
                      <td title="北京市朝阳区崔各庄地区社区社会组织联合会">
                      <a href="/wssbweb/wssb/dc/orgInfo.do?action=seeParticular&orgId=000010000017941&websitId=100&netTypeId=2" target="_blank">
                      北京市朝阳区崔各庄地区社区社会...
                      </a>
                      </td>
                      <td title="北京市朝阳区人民政府崔各庄地区办事处">北京市朝阳区人民政府崔各庄地区...</td>
                      <td align="center">0220969</td>
                      <td align="center">
                                            51110105MJ0220969D

                                        </td>
                      <td align="center">2019-05-27</td>

                    </tr>

                  </table></td>
                </tr>
              </table>
              <table width="100%" border="0" cellspacing="0" cellpadding="0">
                <tr>
                  <td width="20%" height="40" align="left">
                    总计:&nbsp;15254&nbsp;条记录
                  </td>
                  <td width="80%" height="40" align="right">


                            <table width="100%" border="0" cellpadding="0" cellspacing="0" class="page">
<tr>

<form name="pageform" action="searchOrgList.do?action=searchOrgList" method="post">
<td align="left">









                           <input type="hidden" name="page_flag" value="true">
<input type="hidden" name="goto_page" value="">
<input type="hidden" name="current_page" value="2">
<input type="hidden" name="total_count" value="15254">
<input type="hidden" name="registrationDeptCode" value="">
<input type="hidden" name="netTypeId" value="2">
<input type="hidden" name="order" value="">
<input type="hidden" name="status" value="">
<input type="hidden" name="websitId" value="100">
<input type="hidden" name="corporateType" value="">
<input type="hidden" name="registrationNo" value="">
<input type="hidden" name="orgName" value="">
<td align="right">
&nbsp;<a href="#" onclick="f_goto_page(pageform, 'first')">首页</a>&nbsp;|&nbsp;<a href="#" onclick="f_goto_page(pageform, 'prev');">上页</a>&nbsp;|&nbsp;<a href="#" onclick="f_goto_page(pageform, 'next');">下页</a>&nbsp;|&nbsp;<a href="#" onclick="f_goto_page(pageform, 'last');">末页</a>&nbsp;&nbsp;第2/763页&nbsp;转到<input type="text" name="to_page" size="2">页<button onclick="f_goto_page(pageform, pageform.to_page.value);">-&gt;</button>
</td>
</td>
</form>
</tr>
</table>



                  </td>
                </tr>
              </table></td>
            <td width="4%">&nbsp;</td>
          </tr>

          <tr>
            <td>&nbsp;</td>
            <td>&nbsp;</td>
            <td>&nbsp;</td>
          </tr>
        </table>      </td>
  </tr>
</table>

<!--bottom-->

<script>
tongzhigonggao_2();
xinxigongbu_2();
</script>



</body>
</html>
weixin_41993251
weixin_41993251 回复weixin_41993251: 找到了 已经运行出来了 要把条件都写进字典里循环 非常感谢!
9 个月之前 回复
caozhy
每个人都有一个梦才不会孤单的说话就有天堂 回复weixin_41993251: 目前手上没有环境,你可以搜索下requests post,或者还写不出来,回头我有了环境帮你写
9 个月之前 回复
weixin_41993251
weixin_41993251 您好,谢谢您的回答。可否发一下如何写POST的代码,是跟我写的原代码那样建立一个字典,字典内容就是你回复的POST内容吗?初学爬虫的小白,有点不懂,麻烦你啦
9 个月之前 回复

这样太麻烦了,建议使用selenium来爬取

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
如何使用Python抓取翻页网页的数据
我想使用Python抓取一个需要翻页的网页所有数据,但换页时URL不变,我想找到换页 的接口,通过接口访问下一页的数据。请问怎样分析? [http://www.szairport.com/frontapp/HbxxServlet?iscookie=C](http://www.szairport.com/frontapp/HbxxServlet?iscookie=C "")
如何同时打开每一页网址,并进行selenium操作(翻页URL不变)
请问大神,如何同时打开每一页地址(翻页URL地址是不变的),并且进行selenium操作填表等。 我现在用自动化点击下一页再操作,效率极低。 应该用什么方法实现呢?requests的话好像只能针对html,并不能在途中使用from selenium import webdriver吧? ![图片说明](https://img-ask.csdn.net/upload/201907/22/1563793420_530592.jpg) ![图片说明](https://img-ask.csdn.net/upload/201907/22/1563793430_743787.jpg)
如何实现while里的嵌套循环n+1?
## 1.需求是:用循环实现自动翻页后再当前页数进行selenium自动化点击* ## 2.出现问题:不管第几页执行完后 提交确认后网站自动返回到“第一页” ## 3.目的是: 第一次循环 点击前进按钮1次,第二次循环前进按钮点击2次 如果类推 ## 4.请教大神如何修改以下代码,使得每循环n次,嵌套循环就执行n+1次?ps:URL地址是不变的,或许有其他方******** ![图片说明](https://img-ask.csdn.net/upload/201907/09/1562618458_427287.png) 法吗? ``` while page <= 87: page=page+1 driver.find_element_by_xpath("//div[@class='el-col__multi-checkbox el-col el-col-24']//span[@class='el-checkbox__inner']").click()#执行操作 while page <= b: n = home page + 1 driver.find_element_by_xpath("//button[@class='btn-next']").click()#点击前进下一页 time.sleep(2) continue ```
在中国程序员是青春饭吗?
今年,我也32了 ,为了不给大家误导,咨询了猎头、圈内好友,以及年过35岁的几位老程序员……舍了老脸去揭人家伤疤……希望能给大家以帮助,记得帮我点赞哦。 目录: 你以为的人生 一次又一次的伤害 猎头界的真相 如何应对互联网行业的「中年危机」 一、你以为的人生 刚入行时,拿着傲人的工资,想着好好干,以为我们的人生是这样的: 等真到了那一天,你会发现,你的人生很可能是这样的: ...
《MySQL 性能优化》之理解 MySQL 体系结构
本文介绍 MySQL 的体系结构,包括物理结构、逻辑结构以及插件式存储引擎。
【资源】一个C/C++开发工程师的学习路线(已经无路可退,唯有逆风飞翔)【内附资源页】
声明: 1)该文章整理自网上的大牛和专家无私奉献的资料,具体引用的资料请看参考文献。 2)本文仅供学术交流,非商用。所以每一部分具体的参考资料并没有详细对应。如果某部分不小心侵犯了大家的利益,还望海涵,并联系博主删除。 3)博主才疏学浅,文中如有不当之处,请各位指出,共同进步,谢谢。 4)此属于第一版本,若有错误,还需继续修正与增删。还望大家多多指点。大家都共享一点点,一起为祖国科研的推进...
程序员请照顾好自己,周末病魔差点一套带走我。
程序员在一个周末的时间,得了重病,差点当场去世,还好及时挽救回来了。
20道你必须要背会的微服务面试题,面试一定会被问到
写在前面: 在学习springcloud之前大家一定要先了解下,常见的面试题有那块,然后我们带着问题去学习这个微服务技术,那么就会更加理解springcloud技术。如果你已经学了springcloud,那么在准备面试的时候,一定要看看看这些面试题。 文章目录1、什么是微服务?2、微服务之间是如何通讯的?3、springcloud 与dubbo有哪些区别?4、请谈谈对SpringBoot 和S...
达摩院十大科技趋势发布:2020 非同小可!
【CSDN编者按】1月2日,阿里巴巴发布《达摩院2020十大科技趋势》,十大科技趋势分别是:人工智能从感知智能向认知智能演进;计算存储一体化突破AI算力瓶颈;工业互联网的超融合;机器间大规模协作成为可能;模块化降低芯片设计门槛;规模化生产级区块链应用将走入大众;量子计算进入攻坚期;新材料推动半导体器件革新;保护数据隐私的AI技术将加速落地;云成为IT技术创新的中心 。 新的画卷,正在徐徐展开。...
轻松搭建基于 SpringBoot + Vue 的 Web 商城应用
首先介绍下在本文出现的几个比较重要的概念: 函数计算(Function Compute): 函数计算是一个事件驱动的服务,通过函数计算,用户无需管理服务器等运行情况,只需编写代码并上传。函数计算准备计算资源,并以弹性伸缩的方式运行用户代码,而用户只需根据实际代码运行所消耗的资源进行付费。Fun: Fun 是一个用于支持 Serverless 应用部署的工具,能帮助您便捷地管理函数计算、API ...
Python+OpenCV实时图像处理
目录 1、导入库文件 2、设计GUI 3、调用摄像头 4、实时图像处理 4.1、阈值二值化 4.2、边缘检测 4.3、轮廓检测 4.4、高斯滤波 4.5、色彩转换 4.6、调节对比度 5、退出系统 初学OpenCV图像处理的小伙伴肯定对什么高斯函数、滤波处理、阈值二值化等特性非常头疼,这里给各位分享一个小项目,可通过摄像头实时动态查看各类图像处理的特点,也可对各位调参、测试...
2020年一线城市程序员工资大调查
人才需求 一线城市共发布岗位38115个,招聘120827人。 其中 beijing 22805 guangzhou 25081 shanghai 39614 shenzhen 33327 工资分布 2020年中国一线城市程序员的平均工资为16285元,工资中位数为14583元,其中95%的人的工资位于5000到20000元之间。 和往年数据比较: yea...
为什么猝死的都是程序员,基本上不见产品经理猝死呢?
相信大家时不时听到程序员猝死的消息,但是基本上听不到产品经理猝死的消息,这是为什么呢? 我们先百度搜一下:程序员猝死,出现将近700多万条搜索结果: 搜索一下:产品经理猝死,只有400万条的搜索结果,从搜索结果数量上来看,程序员猝死的搜索结果就比产品经理猝死的搜索结果高了一倍,而且从下图可以看到,首页里面的五条搜索结果,其实只有两条才是符合条件。 所以程序员猝死的概率真的比产品经理大,并不是错...
害怕面试被问HashMap?这一篇就搞定了!
声明:本文以jdk1.8为主! 搞定HashMap 作为一个Java从业者,面试的时候肯定会被问到过HashMap,因为对于HashMap来说,可以说是Java集合中的精髓了,如果你觉得自己对它掌握的还不够好,我想今天这篇文章会非常适合你,至少,看了今天这篇文章,以后不怕面试被问HashMap了 其实在我学习HashMap的过程中,我个人觉得HashMap还是挺复杂的,如果真的想把它搞得明明白...
毕业5年,我问遍了身边的大佬,总结了他们的学习方法
我问了身边10个大佬,总结了他们的学习方法,原来成功都是有迹可循的。
python爬取百部电影数据,我分析出了一个残酷的真相
2019年就这么匆匆过去了,就在前几天国家电影局发布了2019年中国电影市场数据,数据显示去年总票房为642.66亿元,同比增长5.4%;国产电影总票房411.75亿元,同比增长8.65%,市场占比 64.07%;城市院线观影人次17.27亿,同比增长0.64%。 看上去似乎是一片大好对不对?不过作为一名严谨求实的数据分析师,我从官方数据中看出了一点端倪:国产票房增幅都已经高达8.65%了,为什...
推荐10个堪称神器的学习网站
每天都会收到很多读者的私信,问我:“二哥,有什么推荐的学习网站吗?最近很浮躁,手头的一些网站都看烦了,想看看二哥这里有什么新鲜货。” 今天一早做了个恶梦,梦到被老板辞退了。虽然说在我们公司,只有我辞退老板的份,没有老板辞退我这一说,但是还是被吓得 4 点多都起来了。(主要是因为我掌握着公司所有的核心源码,哈哈哈) 既然 4 点多起来,就得好好利用起来。于是我就挑选了 10 个堪称神器的学习网站,推...
这些软件太强了,Windows必装!尤其程序员!
Windows可谓是大多数人的生产力工具,集娱乐办公于一体,虽然在程序员这个群体中都说苹果是信仰,但是大部分不都是从Windows过来的,而且现在依然有很多的程序员用Windows。 所以,今天我就把我私藏的Windows必装的软件分享给大家,如果有一个你没有用过甚至没有听过,那你就赚了????,这可都是提升你幸福感的高效率生产力工具哦! 走起!???? NO、1 ScreenToGif 屏幕,摄像头和白板...
阿里面试,面试官没想到一个ArrayList,我都能跟他扯半小时
我是真的没想到,面试官会这样问我ArrayList。
曾经优秀的人,怎么就突然不优秀了。
职场上有很多辛酸事,很多合伙人出局的故事,很多技术骨干被裁员的故事。说来模板都类似,曾经是名校毕业,曾经是优秀员工,曾经被领导表扬,曾经业绩突出,然而突然有一天,因为种种原因,被裁员了,...
大学四年因为知道了这32个网站,我成了别人眼中的大神!
依稀记得,毕业那天,我们导员发给我毕业证的时候对我说“你可是咱们系的风云人物啊”,哎呀,别提当时多开心啦????,嗯,我们导员是所有导员中最帅的一个,真的???? 不过,导员说的是实话,很多人都叫我大神的,为啥,因为我知道这32个网站啊,你说强不强????,这次是绝对的干货,看好啦,走起来! PS:每个网站都是学计算机混互联网必须知道的,真的牛杯,我就不过多介绍了,大家自行探索,觉得没用的,尽管留言吐槽吧???? 社...
良心推荐,我珍藏的一些Chrome插件
上次搬家的时候,发了一个朋友圈,附带的照片中不小心暴露了自己的 Chrome 浏览器插件之多,于是就有小伙伴评论说分享一下我觉得还不错的浏览器插件。 我下面就把我日常工作和学习中经常用到的一些 Chrome 浏览器插件分享给大家,随便一个都能提高你的“生活品质”和工作效率。 Markdown Here Markdown Here 可以让你更愉快的写邮件,由于支持 Markdown 直接转电子邮...
看完这篇HTTP,跟面试官扯皮就没问题了
我是一名程序员,我的主要编程语言是 Java,我更是一名 Web 开发人员,所以我必须要了解 HTTP,所以本篇文章就来带你从 HTTP 入门到进阶,看完让你有一种恍然大悟、醍醐灌顶的感觉。 最初在有网络之前,我们的电脑都是单机的,单机系统是孤立的,我还记得 05 年前那会儿家里有个电脑,想打电脑游戏还得两个人在一个电脑上玩儿,及其不方便。我就想为什么家里人不让上网,我的同学 xxx 家里有网,每...
2020 年,大火的 Python 和 JavaScript 是否会被取而代之?
Python 和 JavaScript 是目前最火的两大编程语言,但是2020 年,什么编程语言将会取而代之呢? 作者 |Richard Kenneth Eng 译者 |明明如月,责编 | 郭芮 出品 | CSDN(ID:CSDNnews) 以下为译文: Python 和 JavaScript 是目前最火的两大编程语言。然而,他们不可能永远屹立不倒。最终,必将像其他编程语言一...
史上最全的IDEA快捷键总结
现在Idea成了主流开发工具,这篇博客对其使用的快捷键做了总结,希望对大家的开发工作有所帮助。
阿里程序员写了一个新手都写不出的低级bug,被骂惨了。
这种新手都不会范的错,居然被一个工作好几年的小伙子写出来,差点被当场开除了。
谁是华为扫地僧?
是的,华为也有扫地僧!2020年2月11-12日,“养在深闺人不知”的华为2012实验室扫地僧们,将在华为开发者大会2020(Cloud)上,和大家见面。到时,你可以和扫地僧们,吃一个洋...
AI 没让人类失业,搞 AI 的人先失业了
最近和几个 AI 领域的大佬闲聊 根据他们讲的消息和段子 改编出下面这个故事 如有雷同 都是巧合 1. 老王创业失败,被限制高消费 “这里写我跑路的消息实在太夸张了。” 王葱葱哼笑一下,把消息分享给群里。 阿杰也看了消息,笑了笑。在座几位也都笑了。 王葱葱是个有名的人物,21岁那年以全额奖学金进入 KMU 攻读人工智能博士,累计发表论文 40 余篇,个人技术博客更是成为深度学习领域内风向标。 ...
2020年,冯唐49岁:我给20、30岁IT职场年轻人的建议
点击“技术领导力”关注∆每天早上8:30推送 作者|Mr.K 编辑| Emma 来源|技术领导力(ID:jishulingdaoli) 前天的推文《冯唐:职场人35岁以后,方法论比经验重要》,收到了不少读者的反馈,觉得挺受启发。其实,冯唐写了不少关于职场方面的文章,都挺不错的。可惜大家只记住了“春风十里不如你”、“如何避免成为油腻腻的中年人”等不那么正经的文章。 本文整理了冯...
神级宝库!GitHub 标星 1.2w+,Chrome 最天秀的插件都在这里啦!
作者 | Rocky0429 来源 | Python空间 大家好,我是 Rocky0429,一个沉迷 Chrome 不能自拔的蒟蒻… 作为一个在远古时代用过什么 IE、360、猎豹等浏览器的资深器哥,当我第一次了解 Chrome 的时候,就被它的美貌给吸引住了… 就在我用了一段时间之后,我坚决的卸载了电脑上其它碍眼的浏览器,并觉得在之前的搬砖生涯中,我不配当哥,我只配是个沙雕… ...
作为一名大学生,如何在B站上快乐的学习?
B站是个宝,谁用谁知道???? 作为一名大学生,你必须掌握的一项能力就是自学能力,很多看起来很牛X的人,你可以了解下,人家私底下一定是花大量的时间自学的,你可能会说,我也想学习啊,可是嘞,该学习啥嘞,不怕告诉你,互联网时代,最不缺的就是学习资源,最宝贵的是啥? 你可能会说是时间,不,不是时间,而是你的注意力,懂了吧! 那么,你说学习资源多,我咋不知道,那今天我就告诉你一个你必须知道的学习的地方,人称...
那些年,我们信了课本里的那些鬼话
教材永远都是有错误的,从小学到大学,我们不断的学习了很多错误知识。 斑羚飞渡 在我们学习的很多小学课文里,有很多是错误文章,或者说是假课文。像《斑羚飞渡》: 随着镰刀头羊的那声吼叫,整个斑羚群迅速分成两拨,老年斑羚为一拨,年轻斑羚为一拨。 就在这时,我看见,从那拨老斑羚里走出一只公斑羚来。公斑羚朝那拨年轻斑羚示意性地咩了一声,一只半大的斑羚应声走了出来。一老一少走到伤心崖,后退了几步,突...
张朝阳回应迟到 1 分钟罚 500:资本家就得剥削员工
loonggg读完需要2分钟速读仅需 1 分钟大家我,我是你们的校长。前几天,搜狐的董事局主席兼 CEO 张朝阳和搜狐都上热搜了。原因很简单,就是搜狐出了“考勤新规”。一封搜狐对员工发布...
一个程序在计算机中是如何运行的?超级干货!!!
强烈声明:本文很干,请自备茶水!???? 开门见山,咱不说废话! 你有没有想过,你写的程序,是如何在计算机中运行的吗?比如我们搞Java的,肯定写过这段代码 public class HelloWorld { public static void main(String[] args) { System.out.println("Hello World!"); } ...
【蘑菇街技术部年会】程序员与女神共舞,鼻血再次没止住。(文末内推)
蘑菇街技术部的年会,别开生面,一样全是美女。
那个在阿里养猪的工程师,5年了……
简介: 在阿里,走过1825天,没有趴下,依旧斗志满满,被称为“五年陈”。他们会被授予一枚戒指,过程就叫做“授戒仪式”。今天,咱们听听阿里的那些“五年陈”们的故事。 下一个五年,猪圈见! 我就是那个在养猪场里敲代码的工程师,一年多前我和20位工程师去了四川的猪场,出发前总架构师慷慨激昂的说:同学们,中国的养猪产业将因为我们而改变。但到了猪场,发现根本不是那么回事:要个WIFI,没有;...
为什么程序猿都不愿意去外包?
分享外包的组织架构,盈利模式,亲身经历,以及根据一些外包朋友的反馈,写了这篇文章 ,希望对正在找工作的老铁有所帮助
Java校招入职华为,半年后我跑路了
何来 我,一个双非本科弟弟,有幸在 19 届的秋招中得到前东家华为(以下简称 hw)的赏识,当时秋招签订就业协议,说是入了某 java bg,之后一系列组织架构调整原因等等让人无法理解的神操作,最终毕业前夕,被通知调往其他 bg 做嵌入式开发(纯 C 语言)。 由于已至于校招末尾,之前拿到的其他 offer 又无法再收回,一时感到无力回天,只得默默接受。 毕业后,直接入职开始了嵌入式苦旅,由于从未...
从顶级黑客到上市公司老板
一看标题,很多老读者就知道我在写什么了。今天Ucloud成功上市,季昕华成为我所熟悉的朋友里又双叒叕一个成功上市的案例。我们认识大概是十五年多吧,如果没记错,第一次见面应该是2004年,...
世界上有哪些代码量很少,但很牛逼很经典的算法或项目案例?
点击上方蓝字设为星标下面开始今天的学习~今天分享四个代码量很少,但很牛逼很经典的算法或项目案例。1、no code 项目地址:https://github.com/kelseyhight...
​两年前不知如何编写代码的我,现在是一名人工智能工程师
全文共3526字,预计学习时长11分钟 图源:Unsplash 经常有小伙伴私信给小芯,我没有编程基础,不会写代码,如何进入AI行业呢?还能赶上AI浪潮吗? 任何时候努力都不算晚。 下面,小芯就给大家讲一个朋友的真实故事,希望能给那些处于迷茫与徘徊中的小伙伴们一丝启发。(下文以第一人称叙述) 图源:Unsplash 正如Elsa所说,职业转换是...
强烈推荐10本程序员必读的书
很遗憾,这个春节注定是刻骨铭心的,新型冠状病毒让每个人的神经都是紧绷的。那些处在武汉的白衣天使们,尤其值得我们的尊敬。而我们这些窝在家里的程序员,能不外出就不外出,就是对社会做出的最大的贡献。 有些读者私下问我,窝了几天,有点颓丧,能否推荐几本书在家里看看。我花了一天的时间,挑选了 10 本我最喜欢的书,你可以挑选感兴趣的来读一读。读书不仅可以平复恐惧的压力,还可以对未来充满希望,毕竟苦难终将会...
作为一个程序员,内存的这些硬核知识你必须懂!
我们之前讲过CPU,也说了CPU和内存的那点事儿,今天咱就再来说说有关内存,作为一个程序员,你必须要懂的哪那些硬核知识! 大白话聊一聊,很重要! 先来大白话的跟大家聊一聊,我们这里说的内存啊,其实就是说的我们电脑里面的内存条,所以嘞,内存就是内存条,数据要放在这上面才能被cpu读取从而做运算,还有硬盘,就是电脑中的C盘啥的,一个程序需要运行的话需要向内存申请一块独立的内存空间,这个程序本身是存放在...
非典逼出了淘宝和京东,新冠病毒能够逼出什么?
loonggg读完需要5分钟速读仅需 2 分钟大家好,我是你们的校长。我知道大家在家里都憋坏了,大家可能相对于封闭在家里“坐月子”,更希望能够早日上班。今天我带着大家换个思路来聊一个问题...
牛逼!一行代码居然能解决这么多曾经困扰我半天的算法题
春节假期这么长,干啥最好?当然是折腾一些算法题了,下面给大家讲几道一行代码就能解决的算法题,当然,我相信这些算法题你都做过,不过就算做过,也是可以看一看滴,毕竟,你当初大概率不是一行代码解决的。 学会了一行代码解决,以后遇到面试官问起的话,就可以装逼了。 一、2 的幂次方 问题描述:判断一个整数 n 是否为 2 的幂次方 对于这道题,常规操作是不断这把这个数除以 2,然后判断是否有余数,直到 ...
用前端5分钟写一个在线m3u8在线播放器
&lt;!DOCTYPE html&gt; &lt;html lang="en"&gt; &lt;head&gt; &lt;meta charset="UTF-8"&gt; &lt;meta name="viewport" content="width=device-width, initial-scale=1.0"&gt; &lt;meta http-equiv="X...
Spring框架|JdbcTemplate介绍
文章目录一、JdbcTemplate 概述二、创建对象的源码分析三、JdbcTemplate操作数据库 一、JdbcTemplate 概述 在之前的web学习中,学习了手动封装JDBCtemplate,其好处是通过(sql语句+参数)模板化了编程。而真正的JDBCtemplete类,是Spring框架为我们写好的。 它是 Spring 框架中提供的一个对象,是对原始 Jdbc API 对象的简单...
谁说程序员不懂浪漫——我的C语言结婚请柬(附源码)
前言:但行好事,莫问前程——《增广贤文》 从上学起开始学C++,后面也做过H5,现在做Android。无论是学习用的,还是工作用的,上百个软件不止。但最另我骄傲的是,我用程序烂漫了一把。 用C++语言,利用WIN32框架写一个结婚请柬,文末附源码和使用方法,大家可以自行修改,记得帮我点赞哦。 点开程序,你的电脑像中毒一般,漫天的樱花从屏幕上方,伴随着歌声《今天你要嫁给我》,缓缓落下。 ...
为什么说程序员做外包没前途?
之前做过不到3个月的外包,2020的第一天就被释放了,2019年还剩1天,我从外包公司离职了。我就谈谈我个人的看法吧。首先我们定义一下什么是有前途 稳定的工作环境 不错的收入 能够在项目中不断提升自己的技能(ps:非技术上的认知也算) 找下家的时候能找到一份工资更高的工作 如果你目前还年轻,但高不成低不就,只有外包offer,那请往下看。 外包公司你应该...
立即提问