在线观看不卡亚洲电影_亚洲妓女99综合网_91青青青亚洲娱乐在线观看_日韩无码高清综合久久

鍍金池/ 問(wèn)答/ 數(shù)據(jù)分析&挖掘問(wèn)答
任她鬧 回答

看起來(lái)是字符串的編碼問(wèn)題,請(qǐng)把所有字符串轉(zhuǎn)成 unicode 試一下。

柒槿年 回答

數(shù)據(jù)結(jié)構(gòu)長(zhǎng)度永遠(yuǎn)一樣嗎?
為了容錯(cuò)處理,建議事先對(duì)比一下 兩個(gè)數(shù)組的長(zhǎng)度,然后循環(huán) 長(zhǎng)度大的數(shù)組,避免丟失數(shù)據(jù).

心上人 回答

不麻煩各位了,我找到問(wèn)題的原因了。我用代理看了下可以查看頁(yè)面,可以訪問(wèn),應(yīng)該是ip被封了。

離魂曲 回答

商業(yè)網(wǎng)站怎么可能不防爬,這個(gè)是動(dòng)態(tài)加載的,信息都分塊動(dòng)態(tài)加載啦,你F12捉一下xhr的包看一下,我就看到了幾個(gè)包對(duì)應(yīng)著school啊,Property timeline for 5/29 Stephenson Street啊,Similar homes in Pialba的信息,都是json數(shù)據(jù)看著辣眼,丟到排版器排一下看看吧

圖片描述

如果你只想要那個(gè)包的話就帶上cookie去請(qǐng)求,幾得把cookie轉(zhuǎn)成字典再丟過(guò)去,實(shí)測(cè)成功

import requests
cookie = '*********************'
url = 'https://www.realestate.com.au/property/unit-5-29-stephenson-st-pialba-qld-4655'
headers = {'referer': 'https://www.realestate.com.au/property/unit-5-29-stephenson-st-pialba-qld-4655',
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.146 Safari/537.36'
}

def trans_cookie(cookie):
    items =cookie.split(';')
    item_dict = {}
    for item in items:
        key = item.split('=')[0].replace(' ', '')
        value = item.split('=')[1]
        item_dict[key] = value
    print(item_dict)
    return item_dict


cookies = trans_cookie(cookie)





r = requests.get(url,cookies=cookies,headers=headers)
with open('gg.txt','w',encoding='utf-8') as f:
    f.write(r.text)

圖片描述

我以為 回答

瀉藥, 看起來(lái)你的問(wèn)題已經(jīng)解決了。
一個(gè)建議是,對(duì)于爬蟲(chóng)抓取類(lèi)程序,我通常會(huì)選擇mongodb而非mysql這樣的關(guān)系型數(shù)據(jù)庫(kù)進(jìn)行存儲(chǔ),有很多好處:

  1. 爬蟲(chóng)類(lèi)程序一大難題在于被抓取的數(shù)據(jù)格式很多時(shí)候在你遇到問(wèn)題之前是無(wú)法預(yù)知的,mongo是nosql,字段靈活,一個(gè)集合當(dāng)中你插入的每一條文檔都可以有不同的key,查詢時(shí)按照mongo的那一套也完全沒(méi)問(wèn)題,如果sql系db添加一個(gè)字段可能涉及到整張table的修改
  2. mysql的優(yōu)勢(shì)在于事務(wù),適合成熟穩(wěn)定的業(yè)務(wù)類(lèi)型,爬蟲(chóng)抓取存儲(chǔ)的一手?jǐn)?shù)據(jù)多數(shù)情況是臨時(shí)性的,往往會(huì)開(kāi)發(fā)第二層、第三層的查庫(kù)、篩選、清洗程序,那時(shí)你可以從mongo中取出需要的數(shù)據(jù)存入相應(yīng)的其他db滿足業(yè)務(wù)需求,或直接dump出excel
淚染裳 回答

一般是服務(wù)端獲取來(lái)訪客戶端的一些信息,比如:IP,remote_add還有你提到的FORWARDED_FOR等信息。

所以你想獲取某個(gè)代理IP的這些信息,可以這樣:
自己寫(xiě)個(gè)小爬蟲(chóng)(可以使用requests庫(kù)等),使用代理IP,來(lái)訪問(wèn)自己一個(gè)web服務(wù)(比如用django寫(xiě)的一個(gè)小站),這樣就可以在自己的web服務(wù)里面獲取到這個(gè)代理ip的header信息了。

網(wǎng)妓 回答

echarts中可以寫(xiě)個(gè)輔助bar “頂起來(lái)”

圖片描述

var data = [2900, 1000, 1400, 1200, 300, 230]

function iData (data) {
    let max = Math.max.apply(null,data)
    console.log(max)
    let iData = data.map((item) => {
        return max - item /2
    })
    return iData
}


option = {
    title: {
        text: '深圳月最低生活費(fèi)組成(單位:元)',
        subtext: 'From ExcelHome',
        sublink: 'http://e.weibo.com/1341556070/AjQH99che'
    },
    tooltip : {
        trigger: 'axis',
        axisPointer : {            // 坐標(biāo)軸指示器,坐標(biāo)軸觸發(fā)有效
            type : 'shadow'        // 默認(rèn)為直線,可選為:'line' | 'shadow'
        },
        formatter: function (params) {
            var tar = params[1];
            return tar.name + '<br/>' + tar.seriesName + ' : ' + tar.value;
        }
    },
    grid: {
        left: '3%',
        right: '4%',
        bottom: '3%',
        containLabel: true
    },
    xAxis: {
        type : 'category',
        splitLine: {show:false},
        data : ['總費(fèi)用','房租','水電費(fèi)','交通費(fèi)','伙食費(fèi)','日用品數(shù)']
    },
    yAxis: {
        type : 'value'
    },
    series: [
        {
            name: '輔助',
            type: 'bar',
            stack:  '總量',
            itemStyle: {
                normal: {
                    barBorderColor: 'rgba(0,0,0,0)',
                    color: 'rgba(0,0,0,0)'
                },
                emphasis: {
                    barBorderColor: 'rgba(0,0,0,0)',
                    color: 'rgba(0,0,0,0)'
                }
            },
            data: iData(data)
        },
        {
            name: '生活費(fèi)',
            type: 'bar',
            stack: '總量',
            label: {
                normal: {
                    show: true,
                    position: 'inside'
                }
            },
            data:data
        }
    ]
};
吃藕丑 回答

不知道你要lodash何用?

var data = {
    "category": {
        "sum": 34,
        "long_1": "odd",
        "long_2": "odd",
        "long_3": "even",
        "long_4": "odd",
        "long_5": "odd",
        "size_1": "bigger",
        "size_2": "bigger",
        "size_3": "bigger",
        "size_4": "bigger",
        "size_5": "bigger",
        "GD_1_5": "G",
        "sum_long": "even",
        "sum_size": "bigger",
        "weird_1_3": "straight",
        "weird_2_4": "half_straight",
        "weird_3_5": "pair"
    },
    "str": "7,9,8,5,5"
}

var result = data.str.match(/\d+/g).map((num, i) => ({
    long: data.category[`long_${i + 1}`],
    size: data.category[`size_${i+1}`],
    num
}))

console.log(result)

clipboard.png

半心人 回答

土一點(diǎn)的辦法,直接用下面的方式播放就行了

<iframe id="WANG" scrolling="no" allowtransparency="true" frameborder="0"
                src="http://api.wlzhan.com/sudu/?url=http://www.iqiyi.com/v_19rre5iyo8.html"
                width="100%" height="100%" style="background: #000000;"></iframe>
心沉 回答

天貓頁(yè)面打開(kāi)默認(rèn)是掃碼登錄頁(yè)面
首先執(zhí)行
browser.switch_to.frame("J_loginIframe")
切換到標(biāo)簽
而后執(zhí)行
driver.find_element_by_id('J_Quick2Static').click()
切換到密碼登錄頁(yè)面
輸入用戶名和密碼
點(diǎn)擊提交
driver.find_element_by_id('J_SubmitStatic').click()

情未了 回答

我記得localCompare好像也不是總是準(zhǔn)確,如果可以的話,數(shù)據(jù)結(jié)構(gòu)改下,專(zhuān)門(mén)增加一個(gè)用來(lái)排序的字段,比如字母之類(lèi)的。不能改數(shù)據(jù)的話,可以找個(gè)node的拼音庫(kù)試下。

怣痛 回答

知乎上有人碰到同樣的問(wèn)題,答案如下:

#!/usr/bin/python3
# -*- coding:utf8 -*-
import codecs

open("filename",'w',encoding="utf8")
祉小皓 回答

可以去看一下二叉樹(shù)的遞歸,相信應(yīng)該有幫助

北城荒 回答

<?php

header('content-type:text/html;charset=utf8');
$array = [

"version"    => "1.1",
"connection" => "close",

];

foreach ($array as $key => $value)
{

$array["http_".$key] = $value;
unset($array[$key]);

}
var_dump($array);exit;

壞脾滊 回答

直接調(diào)用R里面的ggplot+plotly+shiny 或者你如果是用java的話可以直接寫(xiě)一個(gè)js

練命 回答

別怪我啰嗦,深深的刺痛你。

data = b'你所拿到的全部數(shù)據(jù)'

也就是說(shuō),把你的全部數(shù)據(jù)都納入 b'' 中。如果涉及到換行問(wèn)題,請(qǐng)自行用 Python 來(lái)處理即可。

陪妳哭 回答

首先 json_decode($data, TRUE),之后直接取$data['restaurant']['dishes-select']['options'], 如果你非要循環(huán),那就用遞歸函數(shù)

在showArticle渲染出來(lái)的前端頁(yè)面ajax $get('/getAllarticle)即可拿到數(shù)據(jù)