一区二区三区精密机械,国产色视频一区二区三区QQ号,久久久久国产一区二区三区,嫩草乱码一区三区四区,波多野结衣一区二区,好吊视频一区二区三区,色噜噜狠狠一区二区三区AV蜜芽,无码精品一区二区三区在线,天堂VA蜜桃一区二区三区,强伦轩人妻一区二区三区四区,亚洲日韩一区二区

跳(tiào)轉到(dào)主要(yào) φ≤π內(nèi)容

大(dà)數(shù)據

Sql Server日(rì)志(zhì)清理(lǐ)

分(fēn)類
故障描述

  某項目局點C盤空(kōng)間(ji↑$ān)大(dà)量被使用(yòng),目錄為(wèi)MSSשλQL\log目錄。如(rú)何清理(lǐ)。

故障分(fēn)析

  無

建議(yì)/總結

  多(duō)次執行(xíng)

EXEC sp_cycle_errorlog
GO

清除日(rì)志(zhì)。建議(yì)六次≤&α以上(shàng)。

建議(yì)修改Sql日(rì)志(zhì)轉存。

      打開(kāi) Sql €&¶ Server 配置管理(lǐ)器(qì) --> Sql S₽ ☆erver 服務 --> Sql &¥♣Server (MSSQLSERVER)  ♣--> 屬性 --> 高(gāo)級&π

     修改“轉儲目錄”,将文(∏ ®™wén)件(jiàn)夾修改為(wèi)新≈™♥↑的(de)路(lù)徑

     修改“啓動參數(sΩ§hù)”,将-e後的(de)文(wén)件(jiàn)夾修改為(wèi)新的(Ω™ ™de)路(lù)徑

     然後從(cóng)新啓動 Sq×Ω≠l Server (MSSQLSERVER) ,再次執行(xí→↔≤₩ng)方法一(yī)得(de)指令,發現(xiàn) E₽×‌RRORLOG 文(wén)件(jiàn)就≤£(jiù)在新的(de)文(wén)件(ε∏Ω£jiàn)夾內(nèi)産生(shēng)了(le)

Mysql大(dà)規模數(shù)據庫的(de)簡單遷移方法∏↕ 

分(fēn)類
故障描述

  某大(dà)數(shù)據項目需遷移Mysql數(↔'✔ shù)據庫。涉及3xxG數(shù)據,采用(yòng)mysql↓γ♠dump+source導入太慢(màn)。如(rú)何縮短(duǎ♥"δ✔n)停機(jī)時(shí)間(jiānε₽)。

故障分(fēn)析

  無

處理(lǐ)過程

1、按表導出文(wén)件(jiàn)

mysqldump -uroot -p'x✔←✘♠xx'  beta beta_file_msg_lo↔γ®≤gs_2023_12  > /backup/db-mir/be©βta_file_msg_logs_2023_12.sql γγφ&
mysqldump -uroot -p'xxx' &nπ ®§bsp;beta beta_obs_fi×σ©>le_scan_hunter_2023_12 ↓>φ♦ > /backup/db‌€↑¥-mir/beta_obs_file_s↔α"®can_hunter_2023_12.sql♦± &
mysqldump -uroot -xx↔φ×Ωx'  beta beta_obs_file_scan_zlg‌₽_2023_12  > /backup/db-mir/bet€"a_obs_file_scan_zlg_2023_12.γ↑♥sql &
2、多(duō)進程導入文(wén)件(j÷ iàn)

mysql  -h 127.0.0.1 -P 6λ¥α446 -uroot -p'xxx'  beta   α < /backup/db-mir/beta_file_ms•¶g_logs_2023_12.sql &
mysql  -h 127.0.0.1 -P 6446 -uroot>€♠ -p'xxx'  beta &¥↑↑≥nbsp; < /backup/db-mir/b<®≈eta_obs_file_scan_hunter_2023_12.sql×↕♦ &
mysql  -h 127.0←∞★‌.0.1 -P 6446 -uroot -p ₩∑'xxx'  beta &nbφ<✔≥sp; < /backup/db-mi™αr/beta_obs_file_scan_zl$​&←g_2023_12.sql &

該方法不(bù)依賴三方組件(jiàn),多(duō)并發處理(lǐ)β÷↓≠可(kě)以提高(gāo)速度。

建議(yì)/總結

  無

Hive數(shù)據跨HDFS集群遷移

分(fēn)類
故障描述

  客戶存算(suàn)分(fēn)離(lí),将Hive數(shù)據從(c$≤✔πóng)本地(dì)HDFS遷移到(dào)EMC A300 HDFS存儲‍‌。

故障分(fēn)析

  無

處理(lǐ)過程

1、前期預遷移hdfs文(wén)件(jiàn):©¥≠₽hadoop distcp -pugpt -update -skipcrcc§♥heck  -m 24 /user/hive h≤α↕≤dfs://A300.corem.local:8020/user/€ σ©hive

2、停止hive服務,增量遷移hadoop distcp -pugpt -up↕∞&×date -skipcrccheck &n♦εbsp;-m 24 /user/hive hdfs://A3±α00.corem.local:8020/userΩ∑σ/hive

3、Mysql導出元數(shù)據表:mysqldu♣‍mp -hlocalhost -uhive -ε↑♠p --databases hive > hivφ e_bk.sql

4、替換hive_bk.sql文(wén)件π✔★(jiàn)中間(jiān)的(de)路(lù)徑關鍵字:sed -α≈i 's/master-1/A300.cor∞​π₽em.local/g' hive_bk.sql

5、在Mysql裡(lǐ)成導入hive_bk.sql:

mysql -hlocalhost -uhive –p

mysql> source hive_bk.sql

6、啓動hive服務,檢查狀态,通(tōng)過show★φ database,select等檢查表狀态。

 

建議(yì)/總結

  1.HDFS文(wén)件(jiàn)部分(fēn),需多(d€→∞uō)次同步更新,最終停止業(yè)務後再同步一(yī)次即可(k§∞↕εě)。

        2.元數(∏↑shù)據表裡(lǐ)保存了(le)表的(de)保存路(lù‌↑¶♣)徑。需替換相(xiàng)應數(shù)據。确✘∑φ保更新後路(lù)徑一(yī)緻。

cdh存算(suàn)分(fēn)離(lí)hbase遷移後hbas≈$<e:mate無法rit

分(fēn)類
故障描述

  存算(suàn)分(fēn)離(lí),将hba® γse遷移到(dào)EMC A300。遷移後啓動Hbase Ma♦✘φster,一(yī)直提示無法RIT

hbase:meta,,1.1588230740 st®γate=OFFLINE

故障分(fēn)析

  無

處理(lǐ)過程

       Hbase中有φ•☆$(yǒu)配置文(wén)件(jiàn)。(隻有(yǒu)HBase2.x版≠¥'本需要(yào)修改)搜索hbase.wal.provider參數(shù),如(rú)果不(bù)存在這(zhè)個(gè)字♦>段,需要(yào)添加該參數(shù)到(÷☆₽∏dào)“hbase-site.xml 的(de) Hbase 服務高(gāoλ✔α$)級配置代碼段(安全閥)”,參數(shù)值為(wèi)單個(gè) HDFS WAL

然後再重啓。原因是(shì)wal在新、舊(jiù)∏§↑HDFS搜索。文(wén)件(jiàn)沖突導緻

建議(yì)/總結

  無

SmartSense hst agent SSL認證失敗

分(fēn)類
故障描述

INFO 2023-07-17 17:42:₹&εΩ17,138 hst-agent.py:400 - ✔ ™Registering HST Agent
INFO 2023-07-17 17:42:17β×,145 hst-agent.py:401 - HST Version↔≥∏ : 1.5.1.2.7.5.0-72
INFO 2023-07-17 17:42:17,146 hstλ↔↓±-agent.py:402 - Python Version: 2.7.5
INFO 2023-07-17 17:42:1←•7,146 hst-agent.py:403 - Open SSL Ver'≤sion: OpenSSL 1.0.2k-fips γφ  26 Jan 2017
ERROR 2023-07-17 17:42:≠∑17,282 security.py:74 -  <Two-way SSL authentication¶ ← failed. [SSL: CERTIF © ICATE_VERIFY_FAILED] certificate veriα ≤fy failed (_ssl.c:618)
ERROR 2023-07-17 17:42:17,↑♠×♠554 security.py:74 - Two-way SSL authe¥★×σntication failed. [SSL: CE±¶RTIFICATE_VERIFY_FAILED] certificaγ©te verify failed (_s∏&&©sl.c:618)
ERROR 2023-07-17 17:42:20,692 ε✘♥≤security.py:74 - Two-wa₹↑y SSL authentication fail₹∑÷ed. [SSL: CERTIFICATE_VERIFY_FAILED] ↑↕★♥certificate verify failed (_ssl.c:6γ∑÷±18)
ERROR 2023-07-17 17:42:30,525 sec↑♠urity.py:74 - Two-way SSL ₽γ∑authentication faile‌®✘d. [SSL: CERTIFICATE_≠∞£VERIFY_FAILED] certificate verλ✘₹ify failed (_ssl.c:618)
ERROR 2023-07-17 17:42:δ >59,282 security.py:74 - Tw©☆∑o-way SSL authenticati$ on failed. [SSL: CERTIFICATE_VERIFY_FAIγ$LED] certificate verify failed (_₩πssl.c:618)
 

故障分(fēn)析

  無

處理(lǐ)過程

對(duì)hst服務進行(xíng)重置
hst reset //服務器(qì)端


hst reset-agent //客戶端
hst setup-agent -q //客戶端

建議(yì)/總結

  無

Hive修改引擎為(wèi)Spark無法修改€♠參數(shù)

分(fēn)類
故障描述

  hdp 3默認采用(yòng)tez引擎,根據業(÷  ☆yè)務需求,需臨時(shí)更換為(wèi)spar<>λk引擎。

采用(yòng)

set hive.execution.engin↕γe=spark;

set spark.executor.instances=40;

報(bào)錯(cuò)如(rú)下(xi≈ à)

Error while processing statement:Canot  →modly spark.executor.instances at r↕©ααuntime, t is not in list of pa₽§"αrams that are alowed to be modifed ↑÷δat runtime

故障分(fēn)析

  無

處理(lǐ)過程

    hive 3開(kāi)始,默認進行ε÷(xíng)安全授權,防止運行(xíng)時(s✔∞hí)修改參數(shù)。把hive配置中hive.securit♥βy.authorization.enabled關閉後再行(xíng)測 £↕←試即可(kě)。

建議(yì)/總結

  無

建立本地(dì)bigtop repo

分(fēn)類
故障描述

  bigtop repo位于國(guó)外(wài),大(dà∏★)數(shù)據節點不(bù)具備外(wài)網訪問(wèn)權₩↔₩限,如(rú)何建立本地(dì)repo供安裝。

故障分(fēn)析

  無

處理(lǐ)過程

1.安裝centos7或其它版本。

2.安裝以下(xià)組件(jiàn):yum install -y©'λ wget tar zip unzip yum-utils createε£repo httpd

3.下(xià)載bigtop repo

cd /ye/etc/yum.repos.d/
wget →♦ε↔https://dlcdn.apache.org/bigtop/≤§bigtop-3.2.0/repos/rockylinux-8×>™/bigto
op.repo

4.reposync同步到(dào)本地∞↕←&(dì)

reposync --gpgcheck -1 --repoid=bigtop ↕♣σ--download_path=/var/www/html

5.創建repo

cd /var/www/html/bigtop
createrepo .

6.生(shēng)成repo文(wén)件(jiàn)

cat << EOF > /var/www/html/big¶∞λ↔top/bigtop.repo
[bigtop]
name=bi​πgtop
baseurl=http://master-1/§β↓<bigtop
enabled=1
gpgcheck=0
EOF

7.在其它節點下(xià)載

wget -P /etc/yum.repos.d/ σ★≠÷http://master-1/bigtop/bigtop.rep≈'βo
建議(yì)/總結

  無

ambari 2.7.6+hdp 3.1.5安裝kafka 3.0✘∑≥.0版本

分(fēn)類
故障描述

  無

故障分(fēn)析

  無

處理(lǐ)過程

hdp 3.1.5默認集成kafka2,客戶需要(yào)安裝kafk☆¶a3

安裝如(rú)下(xià):

cd /opt
wget http://vpn.coremtech.com:20080/ka¥↕fka3/kafka_2.12-3.0.0.tgz
wget http://vpn.coremte∞€ch.com:20080/kafka3/server.prφ∏$operties
wget http://vpn.core©♣mtech.com:20080/kafka3/start.txt
tar zxvf kafka_2.12-3.0.0.tgz
cp server.properties kafka↔☆ _2.12-3.0.0/config/
vi kafka_2.12-3.0.0/config/server.λ↔properties
# change id
mkdir /data-a/kafka3-logs
/opt/kafka_2.12-3.0.0/bin/kafka-serve‌ ↔r-start.sh  -daemon /o↓•pt/kafka_2.12-3.0.0/config/server.propeασ≥rties

 

建議(yì)/總結

  一(yī)個(gè)zk環境,支持兩個↑ ↑(gè)不(bù)同kafka版本,僅需要(yào)zk連接器ε↓£±(qì)後加新的(de)命名即可(kě)。例如(rú)masλ±πter:2181/kafka3

安裝flume

分(fēn)類
故障描述

  安裝flume組件(jiàn)

故障分(fēn)析

  無

處理(lǐ)過程

cd /opt
wget http://vpn.coremtech.com:20<&δ080/apache-flume-1.11.•♠★0-bin.tar.gz
tar zxvf apache-flume-$φ1.11.0-bin.tar.gz
mv ./apache-flume-1.11.0-bin ./flume§≤'₹
echo "export FLUME_HOME=/opt/fl®₩ume" >> /etc/profile
echo "export PATH=\$PATH:\$FLU✘₽ME_HOME/bin" >>≈© /etc/profile
source /etc/profile
cd /opt/flume/conf
cp flume-env.sh.temp÷€¥‌late flume-env.sh
"change java_home
flume-ng agent --conf /opt/flume/co•♣α≥nf/
 

建議(yì)/總結

  無

Hbase Version提示org.apache.hadoop.hbase↓™♦.util.GetJavaProperty≤♣γ

分(fēn)類
故障描述

  客戶安裝flume執行(xíng)flume- >γ<ng verion提示org.apache.had♣←λoop.hbase.util.GetJavaProp•✔erty。hbase version也(y∏φ↓ě)提示該錯(cuò)誤。

故障分(fēn)析

  hbase bug,詳見(jiàn):https://revi¥¥ews.apache.org/r/69299/dif€ >≠f/2/?expand=1

處理(lǐ)過程

進入hbase/bin目錄

cp hbase.distro hbase.dβ¶ ←istro-bak //先備份原有(yǒu)文(wén)γ✔λε件(jiàn)

vi hbase.distro

切到(dào)182行(xíng),在add_to_cp§₹↓_if_exists “${HBASE_HOME}/hbase-s•♥αerver/target” 這(zhè)裡(lǐ)下(×>δ∞xià)面加上(shàng)兩行(xíng)

        #δ ‌ Needed for GetJavaProperty check→"§ below
    add_to_cp_if_₹∞∑±exists "${HBASE_HOME}/h↓★© base-server/target/c≈π<δlasses"

把下(xià)面大(dà)概186,187行 •∑(xíng)的(de)

    #add t±§he hbase jars for each module
    for f in $HBASE←≤★​_HOME/hbase-jars/hbase*.jar; doσ‌
     ©↓   if [[ $f = ÷☆*sources.jar ]]
      the↔®☆εn
        : $$δ # Skip sources.jar
      elif [ -f $←$f ]
      then
     &nbs✔☆p;  CLASSPATH=${CLA ™≤¥SSPATH}:$f;
      fi
    done↔¶>↓
這(zhè)部分(fēn)注釋掉

切到(dào)大(dà)概310行(xíng)左右,在

  if [ -n "${HADOOP_IN_ε✘≤PATH}" ] && [ -f "${HADOOP_IN_P₽‍≠ATH}" ]; then

下(xià)面加上(shàng)一(yī)段:

  # If built hbase, temporarily a×‍dd hbase-server*.jar to classpath fo★>≥₹r GetJavaProperty
  ≤™ # Exclude hbase-ser↓§ver*-tests.jar
  temporary_cε≈β±p=
  for f in "${HBASE_HOME}"/lib/ ¥σhbase-server*.jar; do
    ±€if [[ ! "${f}" =~ ^.*\-tests\.jar$ ]]‌₹; then
     δ↑ temporary_cp=":$f"
&nbs$‌p;   fi
  done

然後把

  HADOOP_JAVA_LIBRARY_PATH=$(HA€→€DOOP_CLASSPATH="$CLASSPA¶≤βφTH" "${HADOOP_IN_PATH}" \ 
改成

  HADOOP_JAVA_LIBRARY↕β≥_PATH=$(HADOOP_CLASSPAT★↓H="$CLASSPATH${temporary_cp}" "${HADOOP↕‍Ω✘_IN_PATH}" \
即可(kě)。

詳見(jiàn)附件(jiàn)文(wén)件(jiàn)§€₽

建議(yì)/總結

  無

一区二区三区精密机械,国产色视频一区二区三区QQ号,久久久久国产一区二区三区,嫩草乱码一区三区四区,波多野结衣一区二区,好吊视频一区二区三区,色噜噜狠狠一区二区三区AV蜜芽,无码精品一区二区三区在线,天堂VA蜜桃一区二区三区,强伦轩人妻一区二区三区四区,亚洲日韩一区二区