Docker筆記(一)_容器和虛擬化的觀念

-




在軟體應用開發過程中，可能也會有需要前端跟後端各自能有獨立開發環境。
以往若大家都在同一個Server去跑程式做驗證或上線等，都極有可能
遇到資源被瓜分、或Server掛點等需要等待修復的繁雜問題。
有時甚至可能遇到有衝突的軟體卻又有需要並存的複雜問題。
各自用不同軟體開發但要整合在一塊



會有需要用到Docker的原因就在於說想去節省剛才講到的這段辛苦的配置安裝過程。
此外，也可避免環境軟體衝突導致每次都要重灌
(因為作業系統太髒 裝太多東西影響了軟體相容性等問題)
甚至可以把配置好的環境打包給他人共享，達到一次配置多人共用的Docker核心精神
(有點類似JAVA跨平台理念)





虛擬機 和 容器之間差異比較

Docker 是一套基於Linux系統發展出來的新時代虛擬容器技術
以往要在一台電腦上去跑其他OS的話，通常會需要安裝VirtualBox、VMware等軟體緊接著要自己去下載並安裝不OS(Guest OS)的映像檔案配置RAM、硬碟空間。
(備註:常見的VirtualBox、VMware就是Hypervisor當中的Type2種類)

事實上不管是docker或VM在廣義的層面定義都算是容器，或說都是一種虛擬技術。

VMs(Virtual Machines)
  1. 像是我們耳熟能詳的VMware Workstation,VirtualBox
  2. 虛擬化是用來模擬虛擬硬體建立一個沙盒環境(sandbox)
  3. 運作單位是以一個VM產生實體為單位，較站硬碟空間容量和資源。

Containers
  1. 其實不只有docker,可能還有containerd,podman其他容器工具喔
  2. 聚焦重點在於將程式碼、library和執行環境配置打包可執行的沙盒環境
  3. 沒有需要去虛擬化硬碟，因此效率優於VM的虛擬化。
  4. 可大量去複製輕量級的映象檔
  5. 若單一個應用程式有意常發生則可將可能問題範圍限縮在單一個特定容器，具有隔離性


容器廣義的定義

容器(互不影響各自獨立的環境)
目的:使資源有效被利用、環境一致
特性:具有隔離性
成效:環境一致性、成本節省、系統可移植性高


虛擬化技術想解決的問題(早期)

(作業系統)虛擬化技術基本上想去解決
實體電腦虛擬化，使硬體資源可分享的一種技術。
這是在早期所面對的課題，如今已發展成熟。




又有分成
1.基於系統層(Ex:VirtualBox , VMware)也就是我們常講的虛擬機
是去模擬一整個硬體(CPU,Mem,I/O,Storage) ，載體是一整個OS(也有人說是作業系統的instance)
演變至後期虛擬化技術專門指VM這類技術
(狹義層面的定義就是指作業系統虛擬化技術)

2.基於應用軟體層(Ex:Docker , LXC)，目前比較多人稱的容器大部分指的都是這類的。
是去模擬Process(程序)，載體是Application(也有人說是執行環境的instance)
演變至後期大多用容器化技術(或稱容器虛擬化技術)來概括。


如今如果去看多篇文章或聽專家們的分享大多指的容器定義
都是多加上是去模擬Process(程序)，載體是Application
使VM跟Container之間的定義被完整劃分出來
所以如果你講VM也是容器的一種就可能會被人說是錯的
而演變到現今又將「虛擬化技術」跟「容器化技術」區隔開來。
但也時常看到有人用虛擬化技術去套用跟解釋容器的觀念或是去統稱。
基本上是正常的因為人習慣用已知去理解新的未知。
這就看遇到的筆者、講者、業師、同事、主管是以狹義還廣義層面去定義。



由於虛擬機是以OS為主且是基於系統層的虛擬化
藉由Hypervisor的技術於電腦設備上提供1或至多10個的虛擬機器的相互獨立
並可運行完整作業系統的平台。
講白話一點虛擬機是需要特別去安裝第三方作業系統(又稱Guest OS)在你本機的。
而且VM中里的OS要開機都很花時間，佔用的disk size又大。

而Contaner技術(比如像Docker)
就不需要花太多時間啟動OS且也不會佔用太多disk size，
因為Container已經去幫我們簡化介於OS和App之間Environment建置的工程。
此外由於是基於應用軟體層的虛擬化，還能夠跑數百個虛擬應用程式。
但相對的電腦、主機記憶體就要夠大。
在開發專案中有不同相依性或語言版本的時候想要
他們並存就能利用Container來控管打包。


虛擬機 和 容器之間差異比較表
摘自:http://www.cc.ntu.edu.tw/chinese/epaper/0036/20160321_3611.html


容器化技術想解決的問題(現今)

容器(虛擬)化技術主要想處理軟體系統的環境建置
相較於早期作業系統虛擬化課題又是新的課題也是目前的趨勢
與其為每一個軟體系統建置執行環境，不如讓整個軟體系統的執行環境是
可以像貨櫃一樣可搬遷與重複利用的。








這種容器技術其實早在很久之前就有了
2008年那時的LXC (LinuX Container)，直至2013 Docker才問世。
起初的Docker就是去Call一堆LXC來執行，了無新意。

直到後來發展到第0.9版才終於跨出一大步， 解開LXC是docker唯一且預設的執行環境的束縛。
Docker drops LXC as default execution environment



導入base image的概念之外還多加入如下的isolation tools
DOpenVZ
systemd-nspawn
libvirt-lxc
libvirt-sandbox
qemu/kvm
BSD Jails
Solaris Zones
chroot



結論:
不管是容器化技術或是虛擬化技術都是為了
解決特定情境問題的產物，沒有誰取代誰誰比較新推出比較潮誰就落伍的事。
主要還是看實際應用環境遇到的場景去運用。
















Reference:
Docker Documentation(官網)
https://docs.docker.com/engine/docker-overview/

淺談輕量化的虛擬技術 - Docker容器
http://www.cc.ntu.edu.tw/chinese/epaper/0036/20160321_3611.html

初探Docker - Docker 跟 LXC 以及一般Hypervisor有何差別？
https://lab.howie.tw/2014/08/docker-docker-lxc-hypervisor.html

為什麼要使用容器？
https://rickhw.github.io/2020/02/08/Container/Why-Container/#

Docker 基礎介紹與實戰
https://www.slideshare.net/appleboy/docker-61214768

前端工程師一定要知道的 Docker 虛擬化容器技巧
https://www.slideshare.net/freezejonny/docker-63701917

虚拟机的各种形态
http://weinan.io/2018/10/20/vm.html


認識那條鯨魚 Docker 初探
https://www.slideshare.net/ssuserb43784/docker-56061455


Docker Registry
http://soft.dog/2016/01/22/docker-registry/

Docker - Docker for Windows 10 入門篇
https://skychang.github.io/2017/01/06/Docker-Docker_for_Windows_10_First/


Docker 基礎教學與介紹 101
https://medium.com/unorthodox-paranoid/docker-tutorial-101-c3808b899ac6













留言

張貼留言

這個網誌中的熱門文章

經得起原始碼資安弱點掃描的程式設計習慣培養(五)_Missing HSTS Header

-
圖片
  接續前幾篇系列 經得起原始碼資安弱點掃描的程式設計習慣培養(一)_OWASP Top 10(十大網站安全風險)_學習寫更安全程式碼的網站推薦 經得起原始碼資安弱點掃描的程式設計習慣培養(二)_8.Insecure Deserialization ：不安全的反序列化漏洞ASP.NET處理方式 經得起原始碼資安弱點掃描的程式設計習慣培養(三)_7.Cross Site Scripting(XSS)_Stored XSS_Reflected XSS All Clients 經得起原始碼資安弱點掃描的程式設計習慣培養(四)_1.Injection注入攻擊_SQL Injection)_order by 語句正確參數化套入 最近又遇到被若安掃描到高風險要修正的程式碼啦.... 一看這還真是搞不懂該怎麼修呢 HSTS(HTTP Strict Transport Security)  主要是一份國際標準規格 (RFC 6797) 的網際網路瀏覽安全機制， 用於宣告瀏覽器與伺服器之間通訊方式必須強制採用 TLS/SSL 加密通道。 只要從伺服器端送出一個 Strict-Transport-Security 標頭 (Header) 給瀏覽器，即可告知瀏覽器於未來的某段時間內一律使用 SSL 來和該網站連接 (設定可涵蓋所有子域名網站)， 一旦發生憑證失效情況，使用者將無法再瀏覽該網站，如此一來便可大幅減少中間人攻擊的問題發生。 再更白話一點 HSTS Header 就是負責將 http 強制轉為 https CheckMarx掃碼報告給的說明 ============================================================ 風險: 如果web config沒有設置HSTS表頭、"max-age"(有效期)不足一年， 或沒有設定"includeSubDomains"(包含所有子網域)，可能會使用戶容易遭受中間人攻擊。 發生原因: 許多使用者只要在瀏覽器的網址列輸入網域名稱(Domain Name)即可瀏覽網站， 並沒有輸入協定(Protocol)的名稱。 瀏覽器會自動假設使用者使用的是HTTP協定而不是有加密機制的HTTPS協定。 在第一次發出前往特定網站的請求時，攻擊者可以執行中間人攻擊並將用戶轉址到
閱讀完整內容

經得起原始碼資安弱點掃描的程式設計習慣培養(三)_7.Cross Site Scripting(XSS)_Stored XSS_Reflected XSS All Clients

-
圖片
  近期新加入的功能code剛好也被CheckMarx掃出高風險部分的程式碼漏洞 我也踏到這個Issue啦 Cross Site Scripting(XSS)  第一種.Stored XSS 高風險 CheckMarx掃碼報告給的說明[Stored XSS] ============================================================ 風險: 攻擊者可以利用合法存取應用程式提交資料到資料庫。 當另一個使用者隨後存取該資料，網頁可能會被改寫且惡意腳本可能會被啟動。 發生原因: 從資料庫中的資料建立網頁。資料直接嵌入至HTML的頁面，利用瀏覽器顯示。 資料可能源自於其他使用者的輸入。 如果資料包含HTML片段或Javascript，使用者無法分辨是否為預期的頁面。 該漏洞主因為未先對嵌入資料庫中的資料進行編碼(Encode) 來預防瀏覽器將其當為HTML的格式而非純文字。 如何避免: 1.驗證所有資料，無論其來源為何。驗證應基於白名單：僅接受預定結構的資訊，而不是拒絕不良的樣式(Patterns)。  應確認：  ● 資料型態  ● 大小  ● 範圍  ● 格式  ● 期望值  2. 驗證無法取代編碼. 輸出嵌入之前，不論其來源， 將所有動態資料進行編碼. 編碼方式應該是上下文相關的. 例如: ● HTML內容使用HTML的編碼方式  ● HTML編碼特性是將資料輸出到特性的值 ● JavaScript的編碼方式為伺服器產生的Javascript  3.考慮使用ESAPI的編碼庫，或它的內置功能。對於舊版的ASP.NET，請考慮使用AntiXSS.  4.在HTTP類型對應的表頭， 明確定義整個頁面的字元編碼.  5. 設置 httpOnly 標誌於會期資訊，以防止利用XSS來竊取資訊. ============================================================ 這裡報告描述是指我對傳進來字串參數直接拋給DAL處裡的類別執行查詢 這裡缺乏對輸入進來的字串參數做一些查檢判斷 也建議在帶入時對參數也做一些html encode處理 這裡用AntiXSS來Encode 第二種.Reflected XSS All Clients 高風險 CheckMarx掃碼報告給的說明[Reflecte
閱讀完整內容

(2021年度)駕訓學科筆試準備題庫歸納分析_法規是非題

-
圖片
  若是出現 「必須」、「必需」、「...必...」、「應由」、「應先」、「應...」 則很高機率是圈 是非通常只要是如下字眼 「不必」+動詞 、「不需」「不須」、「可不」、「可以不」、「可立即」 有出現或符合的都選叉 (X)1.違規記點又不登記在駕照上，所以可以 不必理會 而任意違反交通規則。 (X)2.發生重大交通事故，為迅速恢復交通，清除現場，可 不必等待 肇事處理機關之指示，即可進行。 (X)3.道路駕駛練習，行車前 不必實施 車輛安全檢查，因為那是駕駛教練的工作。 (X)4.開車前， 不必檢查 機件安全，但在行駛中要隨時注意儀錶功能顯示，確保行車安全。 (X)5.煞車油若經常低於"MIN"線，只要添加即可， 不必到修理廠檢修 。 (X)6.冷卻系統只要副水箱在滿水位，主水箱 不必檢查 也不會有問題。 (X)7.引擎冷卻水內含有防凍液或防銹劑，可 不必更換 。 (X)8.儀錶板上的「燃油油量錶」之指針高度，已經降低至「E」點，橘色的「低油料警示燈」點亮時， 不必急著加油 ，到達目的地後再行補充燃油即可。 (X)9.有安全氣囊裝備的汽車， 不必繫 安全帶。 (X)10.煞車時有異音，是正常的情況， 不必檢修 。 (X)11.汽車定期檢驗 不必檢驗 車輛故障標誌，所以隨車不一定要帶車輛故障標誌。 (X)12.開車時 不必理會 義交之指揮，一切以號誌為主。 (X)13.汽車經過隧道，因隧道內燈光明亮視線良好，為省電可 不必開亮 頭燈。 (X)14.駕駛人只求技術優良，對遵守交通規則 不必太重視 。 (X)15.在開車前， 不必檢查 機件，以免耽誤行車時間。 (X)16.遇幼童專用車、校車、身心障礙者用特製車或教練車， 不必禮讓 。 (X)17.行車 不必攜帶 隨車工具。 (X)18.行車起駛前進， 不必顯示 方向燈。 (X)19.汽車通過鐵路平交道，前後兩車間， 不必保持 距離。 (X)20.夜間將車輛停放在無燈光設備及照明不清之道路時，亦 不必顯示 停車燈光或反光標識。 (X)21.在夜間或有霧靄、雨雪、風沙及晝晦時，把車輛停在路旁， 不必顯示 停車燈光或反光標識。 (X)22.汽車駕駛人，僅需具有優良駕駛技術， 不需 具備急救的常識和技能。 (X)23.汽車車身、引擎、底盤、電系等重要設備變更或調換時， 不需 向公路主管機關申請臨時檢驗。
閱讀完整內容