數據吧www.commonwealthbilling.com - 專注于企業級云服務器、云計算、網站高防CDN加速、服務器租用托管服務 - 站長資訊中心

     MapReduce是一種，是Google提出的，主要用于搜索領域，解決海量數據的計算問題。MR有兩個階段組成：Map和Reduce，用戶只需實現map()和reduce()兩個函數，即可實現分布式計算。Hadoop MapReduce是一個軟件框架，基于該框架能夠容易地編寫應用程序，這些應用程序能夠運行在由上千個商用機器組成的大集群上，并以一種可靠的，具有容錯能力的方式并行地處理上TB級別的海量數據集。這個定義里面有著這些關鍵詞，

         深入貫徹黨的十九大精神，以習近平新時代中國特色社會主義思想為指導，落實習近平總書記給第三屆大賽“青年紅色筑夢之旅”大學生回信重要精神，落實《國務院辦公廳關于深化高等學校創新創業教育改革的實施意見》和省委書記孫志剛5月3日到我?？疾煺{研的講話精神，進一步激發我校師生創新創業熱情，展示我校創新創業教育成果，6月23日，第四屆中國“互聯網+”大學生創新創業大貴州師范學院決賽在逸夫樓演播廳成功舉辦。

      在互聯網行業當中，因為拉新或推廣的活動把客戶引過來，用戶開始訪問公司的網站，但是經過一段時間可能就會有一部分客戶逐漸流失了。那些留下來的人或者是經?；卦L我們公司網站的人就稱為留存。

    現在大家經常會用到所謂的“日活”（日活躍用戶量，簡稱DAU）來監測我們的網站，有的時候會看到我們的“日活”在一段時期內都是逐漸增加的，這是一個非常好的現象。但是如果我們忽略了留存分析的話，這個結果很可能是一個錯誤。

今日眾多網友在微博反饋，阿里云控制臺訪問出現故障，后臺登錄不上，包括圖片服務也已經掛掉。阿里云發布公告稱，阿里云官網部分管控功能出現訪問異常，目前受影響的業務大部分已經恢復正常。

這篇文章主要記錄介紹了MySQL SQL語句分析查詢優化,需要的朋友可以參考下

 一、問題的提出

    在應用系統開發初期，由于開發數據庫數據比較少，對于查詢SQL語句，復雜視圖的的編寫等體會不出SQL語句各種寫法的性能優劣，但是如果將應用系統提交實際應用后，隨著數據庫中數據的增加，系統的響應速度就成為目前系統需要解決的最主要的問題之一。系統優化中一個很重要的方面就是SQL語句的優化。對于海量數據，劣質SQL語句和優質SQL語句之間的速度差別可以達到上百倍，可見對于一個系統不是簡單地能實現其功能就可，而是要寫出高質量的SQL語句，提高系統的可用性。

如果想要把命令的輸出保存到文件中，你會怎么做？?

  如何配置Linux系統的IP地址，使其能夠連接局域網甚至外網。其實這并不難，Linux系統網絡配置的方法有多種

linux下配置ip地址四種方法
（1）Ifconfig命令

第一種使用ifconfig命令配置網卡的ip地址。此命令通常用來零時的測試用，計算機啟動后

ip地址的配置將自動失效。具體用法如下。Ipconfig  ethx   ipadd    netmask      x.x.x.x。

     這篇文章主要介紹了mysql本地登錄無法使用端口號登錄的解決方法,非常不錯，具有一定的參考借鑒價值，需要的朋友可以參考下

    大家都知道，Linux系統提供了非常多非常多的命令或工具，這些命令都各有所長，都是系統需要的。但我們精力有限，要掌握全部的命令不太現實，

   共享某個文件夾后在網上鄰居打開它，提示：“服務器存儲空間不足，無法處理此命令”，如下圖：

查看系統日志顯示：服務器的配置參數“irps4tacksize”太小，無法讓服務器使用本地設備。請增加此參數的值。如下圖：

 索引是快速搜索的關鍵，MySQL索引的樹立關于MySQL的高效運轉是很重要的。

下面介紹幾種常見的MySQL索引類型。

    ping是一個通信協議，是ip協議的一部分，tcp/ip 協議的一部分。利用它可以檢查網絡是否能夠連通，用好它可以很好地幫助我們分析判定網絡故障。應用格式為：Ping IP地址。但服務啟用ping有時候會造成很多麻煩。因此有時候根據需要（如防止攻擊），Linux服務器管理員可限制服務器禁止其它用戶Ping。同時又保證Linux服務器又可以Ping其它服務器。

下面介紹linux下最簡單的禁ping方法:

默認情況下Linux系統允許ping，但是在某些情況下為了安全起見，我們都把服務器設置為禁ping。

      Linux 實際上是一個網絡操作系統，一直都是，從一開始它就有內置的網絡功能。要將你的局域網連入因特網，構建一個局域網路由器比起構建網關路由器要簡單的多。你不要太過于執念安全或者防火墻規則，對于處理網絡地址轉換（NAT）它還是比較復雜的，NAT是 IPv4 的一個痛點。我們為什么不放棄 IPv4 去轉到 IPv6 呢？這樣將使網絡管理員的工作更加簡單。

    有點跑題了。從理論上講，你的 Linux 路由器是一個至少有兩個網絡接口的小型機器。Linux Gizmos 有一個很大的單板機名單：98 個開放規格、適于黑客的 SBC 的目錄。你能夠使用一個很老的筆記本電腦或者臺式計算機。你也可以使用一個緊湊型計算機，像 ZaReason Zini 或者 System76 Meerkat 一樣，雖然這些有點貴，差不多要 $600。但是它們又結實又可靠，并且你不用在 Windows 許可證上浪費錢。

     關于python的用戶來說，2.x和3.x版別的不兼容問題會讓你很頭疼，所以最好的辦法就是一起在本機裝置多個版別的Python并進行裝備，下面就來說說如安在同一臺Windows體系中裝置和裝備多個版別的python環境。

     越來越多的獨立開發人員將他們的應用程序打包為Snap，使他們輕松實現在根據Linux的多種操作系統上的部署，不管是最終用戶仍是軟件包維護人員。隨著Canonical將其通用二進制格局面向Ubuntu生態系統之外的主流GNU/Linux發行版，snap現在越來越受歡迎。下面引起咱們注意的應用程序之一是 Nitrokey-app，由Szczepan創立。 Nitrokey在德國制作，Nitrokey加密和安全的物理USB密匙可保護您的在線帳戶，電子郵件，文件，服務器證書和整個磁盤驅動器免受身份盜用，很多監督，間諜活動乃至數據丟掉。它是敞開 源代碼，能夠滿意一切需求和口味。即便Purism運用Nitrokey為其隱私為要點Librem筆記本電腦和行將到來的Linux手機。

    什么是 遠程HFS？
SSHFS（Secure SHell FileSys云端m）是一個客戶端，能夠讓咱們經過 SSH 文件傳輸協議（SFTP）掛載長途的文件體系而且在本地機器上和長途的目錄和文件進行遠程。
SFTP 是一種經過 SSH 協議供給文件訪/問、文件傳輸云端件辦理功用的安全文件傳輸協議。由于 SSH 在網絡中從一臺電腦到另一臺電腦傳輸文件的時分運用數據加密通道，而且 SSHFS 內置在 FUSE（用戶空間的文件體系）內核模塊，答應任何非特權用戶在不修正內核代碼的狀況下創立他們自己的文件體系。
     在這篇文章中，咱們將會向你展現在恣意 Linux 發行版上怎么裝置而且運用 SSHFS 客戶端，在本地 Linux 機器上掛載長途的 Linux 文件體系或許目錄。

    Tomcat是我們經常使用的 servlet容器之一，甚至很多線上產品都使用 Tomcat充當服務器。而且優化后的Tomcat性能提升顯著，本文從以下幾方面進行分析優化。
一、內存優化
      默認情況下Tomcat的相關內存配置較低，這對于一些大型項目顯然是不夠用的，這些項目運行就已經耗費了大部分內存空間，何況大規模訪問的情況。即使是本文中的這個只有一個頁面的超小項目，在并發達到一定程度后也會拋出以下類似異常：
Java代碼  收藏代碼
嚴重: Exception invoking periodic operation: java.lang.OutOfMemoryError: Java heap space 
 
嚴重: Error processing request java.lang.OutOfMemoryError: GC overhead limit exceeded 
        說明Tomcat已經無力支持訪問處理，內部GC也已經“無能無力”。所以一般情況下我們需要重新配置Tomcat的相關內存大小。
        1.修改內存等 JVM相關配置
        Linux下修改TOMCAT_HOME/bin/catalina.sh，在其中加入，可以放在CLASSPATH=下面：
Java代碼  收藏代碼
JAVA_OPTS="-server -XX:PermSize=512M -XX:MaxPermSize=1024m -Xms2048m -Xmx2048m" 
        windows下修改TOMCAT_HOME/bin/catalina.bat，在其中加入，可以放在set CLASSPATH=下面：
Java代碼  收藏代碼
set JAVA_OPTS=-server -XX:PermSize=512M -XX:MaxPermSize=1024m -Xms2048m -Xmx2048m 
        這些參數在我們學習JVM部分文章時已經都認識過了，不過這里還是簡單介紹下：
        -server：啟用 JDK的 server 版本；
        -Xms：Java虛擬機初始化時堆的最小內存，一般與 Xmx配置為相同值，這樣的好處是GC不必再為擴展內存空間而消耗性能；
        -Xmx：Java虛擬機可使用堆的最大內存；
        -XX:PermSize：Java虛擬機永久代大??；
        -XX:MaxPermSize：Java虛擬機永久代大小最大值；
        除了這些參數外您還可以根據具體需要配置其他參數，參數的配置可以參考JVM參數的配置
        2.驗證
        設置成功后我們可以利用JDK自帶的工具進行驗證，這些工具都在JAVA_HOME/bin目錄下：
        1）jps：用來顯示本地的java進程，以及進程號，進程啟動的路徑等。
        2）jmap：觀察運行中的JVM 物理內存的占用情況，包括Heap size , Perm size 下載地址 等。
        進入命令行模式后，進入JAVA_HOME/bin目錄下，然后輸入jps命令：
Java代碼  收藏代碼
jps 
#顯示以下結果 
2340 Bootstrap 
6696 Jps 在$CATALINA_HOME/conf/server.xml配置文件中的Connetctor節點，和連接數相關的參數配置和優化。

     當你需要管理一臺容納多個用戶的 Linux 機器時，比起一些基本的用戶管理工具所提供的方法，有時候你需要對這些用戶采取更多的用戶權限管理方式。特別是當你要管理某些用戶的權限時，這個想法尤為重要。比如說，你有一個目錄，某個用戶組中的用戶可以通過讀和寫的權限訪問這個目錄，而其他用戶組中的用戶對這個目錄只有讀的權限。在 Linux 中，這是完全可以實現的

與windows操作系統相比，linux系統中的用戶和組賬號作用基本上是一致的，同樣都是基于用戶身份來控制對資源的訪問，只是在表現形式方面存在一些差異。
管理用戶賬號和組賬號

      Docker官方強烈推薦用戶使用自己的自定義網絡，所以在使用網絡容器的時候最好使用自定義的網絡，默認docker使用自帶的bridge網絡，bridge網絡下的docker容器相互之間無法解析彼此的容器名稱。如果您需要容器能夠通過 bridge 網絡進行通信，則官方允許使用舊版本的--link，這--link是建議使用的唯一用例。最后，官方強烈地考慮使用用戶定義的網絡。

一. 用戶自定義 bridge 和默認 bridge 的差別

     云計算在2018年的今天已經快成了一個家喻戶曉的詞了。但是三種不同模式PaaS, IaaS 和SaaS的區別，卻有很非業內人士不知道?！霸啤逼鋵嵤腔ヂ摼W的一個隱喻，“云計算”其實就是使用互聯網來接入存儲或者運行在遠程服務器端的應用，數據，或者服務。

雖然云計算的服務模式仍在不斷進化，但業界普遍接受將云計算按照服務的提供方式劃分為三個大類：

SaaS（Software as a Service–軟件即服務）

    在運行linux的進程中, 有時會呈現因為裝置體系時分區不妥導致有的分區空間不足,而有的分區空間過剩的狀況.比如: 我在裝置體系時給/usr/local分配器了5G的空間,但運用一段進程后發現, /usr/local最多只用到了1G.這樣能夠將/usr/local大小調整為1G. 空出4G留作他用.本文概括了在不破快文件體系數據的前提下對文件體系大小進行調整的辦法.這里采用的是"拆東墻, 補西墻"的辦法. 當然, 假如你的磁盤中有未分區的閑暇空間, 你就不必減小某個分區的空間了.

 一. 概述
    我們知道在Linux操作系統看來， sql server產品與其它應用程序一樣，沒有特別的對待。但內存，硬盤，cpu作為數據庫系統最重要的核心資源，所以在sql server 2005及以后出現了SQLOS，這個組件是sqlserver和windows的中間層，被用于CPU的任務調度，解決I/O的資源爭用，協調內存管理等其它的資源協調工作。下面我來試著講講SQLOS下的Scheduler調度管理。話不多說了，來一起看看詳細的介紹吧。
 
二. CPU 的配置
 在Sql server 里點擊數據庫實例右鍵到屬性，選擇處理器進行配置。最大工作線程數的默認值是0 （注意這里配置的是worker它是對CPU的真正封裝）。這使得SQL Server能夠在啟動時自動配置工作線程的數量。默認設置對于大多數系統是最好的。但是，根據您的系統配置，將最大工作線程數設置為一個特定的值有時會提高性能。當查詢請求的實際數量小于最大工作線程數時，一個線程處理一個查詢請求。但是，如果查詢請求的實際數量超過最大線程量時，SQLServer會將Worker Threads線程池化，以便下一個可用的工作線程可以處理請求。
 
配置如下圖所示:

      大家都知道，光靠一個網站首頁是無法承載所有關鍵詞的，一般我們是把最最最核心的關鍵詞放在首頁，其它的關鍵詞布局在欄目頁，具體該怎么做呢?

對于欄目頁的布局，我們遵循的只有一個原則：易用性。關于欄目頁的優化方面，我就不多說了，今天要跟大家聊聊平時大家容易犯的一些錯誤，很可能是你在不經意間犯的這些小錯誤，導致了你網站沒有排名。

首先你要確定錯誤的原因： 

在你自己的電腦上(不是在云服務器上) 

讓IE顯示詳細的出錯信息： 
菜單--工具--Internet選項--高級--顯示友好的HTTP錯誤信息，去掉這個選擇吧，然后刷新出錯頁，就可以看到詳細的出錯信息，對幫助你確定錯誤所在非常有幫助！ 


造成500錯誤常見原因有：ASP語法出錯、ACCESS數據庫連接語句出錯、文件引用與包含路徑出錯、使用了服務器不支持的組件如FSO等。 

另外,對于win2008的IIS默認不顯示詳細出錯信息的問題可以以下方法解決: 

1.打開IIS,點全局設置中的"錯誤頁"(注意必須是全局網站!) 
2.點 右上角 的 編輯 功能設置. 

2.在錯誤響應中,選第二項的"詳細錯誤" 

3.點確定后刷新IE就會顯示詳細的出錯信息. 
(注意這樣設置會造成用戶的自定義404等出錯無效，請在查看后恢復回原來的第三項“本地詳細錯誤和遠程請求的自定義錯誤頁”) 


另外，對于PHP站： 
PHP顯示為空白頁時如何查找真正的原因? 

您可以用記事本打開windows\php.ini 

找到以下內容: 
display_errors = Off 

改成 

display_errors = On 


保存后重啟IIS,再訪問空白的PHP頁,就可以看到真出的原因,找到原因后,一般要將php.ini恢復回原來的display_errors = Off設置,不然有些網站會提示出錯. 

?$$?$$$\mathrm{<strong><span\; style="font-size:\; 16px;">S</span></strong>}\mathrm{<strong><span\; style="font-size:\; 16px;">Q</span></strong>}\mathrm{<strong><span\; style="font-size:\; 16px;">L</span></strong>}<strong><span\; style="font-size:\; 16px;">語</span></strong><strong><span\; style="font-size:\; 16px;">句</span></strong><strong><span\; style="font-size:\; 16px;">的</span></strong><strong><span\; style="font-size:\; 16px;">基</span></strong><strong><span\; style="font-size:\; 16px;">本</span></strong><strong><span\; style="font-size:\; 16px;">類</span></strong><strong><span\; style="font-size:\; 16px;">型</span></strong>$$$?$$?$$??$$$$$$$$??$$?$$?

2018年一季度全球服務器市場報告，本季度全球服務器出貨量為270萬臺，同比增長20.7%，銷售額為188億美元，同比增長38.6%，全球服務器市場連續三個季度實現了兩位數的增長。

  一、主要丟包原因
 
1、接收端處理時間過長導致丟包：調用recv方法接收端收到數據后，處理數據花了一些時間，處理完后再次調用recv方法，在這二次調用間隔里,發過來的包可能丟失。對于這種情況可以修改接收端，將包接收后存入一個緩沖區，然后迅速返回繼續recv。
 
2、發送的包巨大丟包：雖然send方法會幫你做大包切割成小包發送的事情，但包太大也不行。例如超過50K的一個udp包，不切割直接通過send方法發送也會導致這個包丟失。這種情況需要切割成小包再逐個send。
 
3、發送的包較大，超過接受者緩存導致丟包：包超過mtu size數倍，幾個大的udp包可能會超過接收者的緩沖，導致丟包。這種情況可以設置socket接收緩沖。以前遇到過這種問題，我把接收緩沖設置成64K就解決了。
int nRecvBuf=32*1024;//設置為32K
setsockopt(s,SOL_SOCKET,SO_RCVBUF,(const char*)&nRecvBuf,sizeof(int));
 
4、發送的包頻率太快：雖然每個包的大小都小于mtu size 但是頻率太快，例如40多個mut size的包連續發送中間不sleep，也有可能導致丟包。這種情況也有時可以通過設置socket接收緩沖解決，但有時解決不了。所以在發送頻率過快的時候還是考慮sleep一下吧。
 
5、局域網內不丟包，公網上丟包。這個問題我也是通過切割小包并sleep發送解決的。如果流量太大，這個辦法也不靈了?？傊畊dp丟包總是會有的，如果出現了用我的方法解決不了，還有這個幾個方法： 要么減小流量，要么換tcp協議傳輸，要么做丟包重傳的工作

     負載(load)是linux機器的一個重要指標，直觀了反應了機器當前的狀態。Linux的負載高，主要是由于CPU使用、內存使用、IO消耗三部分引起。任意一項使用過量，都將導致服務器負載的急劇增加。

直接查看負載狀況可以用命令：

#uptime
既然是CPU使用，內存使用和IO消耗。那么需要兩個命令來查看，一個是top一個是iostat。top自帶，但只能較好的顯示CPU和內存情況，無法獲得更多的IO具體信息。