大數據和雲計算技術周報（第97期)

• 2019 年 10 月 6 日
• 筆記

導語

「大數據」 三個字其實是個marketing語言，從技術角度看，包含範圍很廣，計算、存儲、網絡都涉及，知識點廣、學習難度高。 本期會給大家奉獻上精彩的：Web安全、時序數據庫、kylin、redis、雲遷移、spark、神經圖網絡，flink。全是乾貨，希望大家喜歡！！！ #大數據和雲計算技術社區#希望通過堅持定期分享能幫助同學在大數據學習道路上盡一份微博之力。相信長期堅持認真閱讀周報的同學，在技術的道路上一定會日益精進！感謝編輯們的長期堅持！也請同學們繼續打賞，支持社區，支持編輯們持續奉獻高質量知識！ #大數據和雲計算技術社區#長期招募有興趣參與社區編輯和運營的同學，歡迎掃描文末二維碼聯繫（參與社區工作，收穫知識和進步，還有紅包哦）。 特別提醒，文末有驚喜！ 以下是正文，限於眾編輯水平有限，不保證大家都喜歡。（如果鏈接不能點開 請用二維碼 謝謝）

1Web安全

這周分享一篇關於web的安全和滲透的學習筆記。可以在平常工作的時候查缺補漏

https://mp.weixin.qq.com/s/L0C2TajMEM3veHgB0Yazxg

2Kylin

在自己電腦上體驗下用 Kylin + Hadoop 來分析大數據的亞秒級神速。

https://mp.weixin.qq.com/s/7pCzeLSb_n5S5yx9sbbOaw

3時序數據庫

時序是下一個熱點

https://mp.weixin.qq.com/s/QkJHvVhQhIQAk1FYvp-UTg

4Redis

本文首先通過Redis到底能存儲多少個鍵值對，引出Redis的Hash表實現方式（數組鏈表）、擴縮容等原理，最後通過一個開腦洞的思考探討，分析了各種利弊，最終討論Redis到底存儲多少個鍵值對會比較好（最多千萬級別）

https://mp.weixin.qq.com/s/Y4DARDPPSkIpme4psMT8Nw

5雲遷移

對於需要保留某種類型的IT工作負載控制，同時又希望利用雲計算環境可擴展性和靈活性優點的眾多公司來說，私有雲可能是一個頗具吸引力的選擇。但是與其他的雲計算選擇相比，是否值得冒此風險實施私有雲計算呢?

https://mp.weixin.qq.com/s/Jk-pEG9TT4ovkjUL3R1T-w

6Spark

本篇文章主要介紹如何使用Spark讀取Hive表數據通過BulkLoad的方式快速的將數據導入到HBase。

https://mp.weixin.qq.com/s/D9IpYm3sagMfp-JG3fJKSA

7圖神經網絡

本文深入介紹阿里圖神經網絡庫 AliGraph 背後的系統架構細節和內部自研的 GNN 算法原理。

https://mp.weixin.qq.com/s/POMluy69sphGZ_AlDnJ0og

8elasticsearch

elastic如今與阿里雲有了深度合作，相信以後越來越多的公司會接入，那麼，他的底層索引原理是什麼呢，為什麼比mysql還要快呢

https://mp.weixin.qq.com/s/a68yVzZK7xju2GPoAftBAw

9redis

實操篇，本文描述了Redis單例、主從模式、sentinel以及集群的配置方式及優缺點對比

https://mp.weixin.qq.com/s/24qveNo-FXz5RVdQ23Ckgw

10flink

本文主要闡述馬赫系統中數據處理的具體設計方案，說明整體設計的來龍去脈。

https://mp.weixin.qq.com/s/zt-Gs2W7e0pv50tnb22PLw

11開心一刻

小編我上周五去一公司面試，他們要我寫個shell,我在他們服務器輸入rm-rf/*, 回車。

他們現在不讓我走了，我想問問我是不是被錄取了?

致謝：

周蓬勃、王在道、孫亞飛、馮藝帆、陳少軍、鄧開表、張少華、薛述強、劉彬、劉超、廖程鵬、董言、呂西金、朱潔、藍隨、黃文輝、郭飛