Các phương pháp dự báo trong data mining

1. Tiên đoán (Genius forecasting) <br /> 2. Ngoại suy xu hướng (Trend Extrapolation) <br /> 3. Phương pháp chuyên gia (Consensus method) <br /> 4. Phương pháp mô phỏng (Stimulation) <br /> 5. Phương pháp ma trận tác động qua lại <br /> 6. Phương pháp kịch bản (Scenario) <br /> 7. Phương pháp cây quyết định (Decision Tree) <br /> 8. Phươ ng pháp dự báo tổng hợp

Các phương pháp dự báo trong data mining

1. Tiên đoán (Genius forecasting) 2. Ngoại suy xu hướng (Trend Extrapolation) 3. Phương pháp chuyên gia (Consensus method) 4. Phương pháp...

Read more »

Active Directory toàn tập - Phần 1+2

<span style="font-size: x-small;"></span><br /> <div align="justify"> <span style="font-size: x-small;">Active Directory là dịch vụ hệ thống quan trọng bậc nhất với vai trò quản lý dữ liệu người dùng, máy tính, groups, và các chính sách cũng như rất nhiều thông tin khác. Để triển khai hệ thống Active Directory chuẩn, tránh các sự cố liên quan là điều cần thiết. Trong loạt bài viết về Active Directory này tôi sẽ giới thiệu với các bạn từ cài đặt 1 máy chủ Domain Controller cho một Domain tới cài thêm một máy chủ DC khác cho Domain đó. Doanh nghiệp phát triển cần phải triển khai các Domain Con, và các Domain ngang hàng trong cùng một Forest.</span></div> <span style="font-size: x-small;"> </span> <span style="font-size: x-small;"> <div align="justify"> <strong>Các phần trong loạt bài viết về Active Directory</strong></div> <div align="justify"> 1. Cài đặt Active Directory trên Windows Server 2003</div> <div align="justify"> 2. Backup Active Directory</div> <div align="justify"> 3. Cài đặt thêm một máy chủ Active Directory vào một Domain đã có</div> <div align="justify"> 4. Cài đặt Multiple Domain cho một hệ thống.</div> <div align="justify"> a. Cài đặt Active Directory trên một Forest mới.</div> <div align="justify"> b. Cài đặt Active Directory trên một domain con</div> <div align="justify"> 5. Đổi tên Domain</div> <div align="justify"> 6. Chuyển Master của Domain.</div> <div align="justify"> <strong>Phần I Giới thiệu về Series bài viết</strong></div> <div align="justify"> Trong Series bài viết về Active Directory này các bạn sẽ biết cách cài đặt và cấu hình lên một hệ thống như dưới đây.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000841.JPG" /></div> <div align="justify"> - Trong phần 2 của bài viết tôi sẽ giới thiệu với các bạn làm cách nào để cài chuẩn một máy chủ Active Directory, cụ thể ở đây tôi cài Active Directory cho domain Vnexperts.net</div> <div align="justify"> - Phần 3 của bài viết sẽ giới thiệu về cài đặt thêm máy chủ Domain Controller cho domain đã có là Vnexperts.net. Cách Backup và Restore lại Active Directory.</div> <div align="justify"> - Phần 4 của bài viết là cài đặt Domain Con trong Domain đã có sẵn là mcsa.vnexperts.net và ccna.vnexperts.net</div> <div align="justify"> - Phần 5 Cài đặt một Domain mới trong forest đã có từ trước là: vne.vn, join máy client vào domain, truy cập vào dữ liệu được share trên Forest.</div> <div align="justify"> - Phần 6 Đổi tên Domain</div> <div align="justify"> - Khắc phục sự cố khi máy chủ Domain Controller hoạt động với chức năng Master của cả Forest bị lỗi, và cách nâng cấp các máy chủ thứ cấp nên thành Master.</div> <div align="justify"> <strong>Phần II – Cài đặt Active Directory trên Windows Server 2003</strong></div> <div align="justify"> <strong>1. Cài đặt và cấu hình DNS</strong></div> <div align="justify"> Khi cài đặt Active Directory trên Windows Server 2003 theo kinh nghiệm của tôi thì các bạn nên cài đặt DNS trước với các thiết lập chuẩn.</div> <div align="justify"> - Địa chỉ IP đặt là địa chỉ tĩnh và địa DNS là địa của chính máy mình.</div> <div align="justify"> - Tạo Zone trong DNS và thiết lập Dynamic Update cho Zone đó đây là một yêu cầu bắt buộc trong để Active Directory có khả năng tự động Update các thiết lập của mình vào trong DNS.</div> <div align="justify"> <strong>a. Đặt địa chỉ IP cho máy chủ - Static IP và DNS vào DNS của chính máy mình.</strong></div> <div align="justify"> Vào card mạng thiết lập địa chỉ IP cho máy chủ với địa chỉ Static là 192.168.100.11, DNS cũng là 192.168.100.11.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000842.JPG" /></div> <div align="justify"> <strong>b. Cài đặt và cấu hình DNS</strong></div> <div align="justify"> - Vào Start à chọn Administrative Tools à Manage Your Server</div> <div align="justify"> - Trong cửa sổ Manage Your Server chọn phần đầu tiên Add or Remove a Role rồi chọn cài đặt DNS nhấn Next và hệ thống sẽ yêu cầu bạn bộ cài Windows Server 2003 bạn cho đĩa CD hoặc trỏ đường dẫn tới thư mục i386 của bộ cài là OK. Kết thúc cài đặt</div> <div align="justify"> - Tạo Zone trong DNS: Vào Start à Administrative Tools à DNS sẽ xuất hiện cửa sổ DNS. Trong phần tạo Zone này các bạn sẽ phải tạo dạng Forward Lookup Zone Dạng Primary Zone.</div> <div align="justify"> - Chuột phải vào Forward Lookup zone chọn New Zone.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000843.JPG" /></div> <div align="justify"> Nhấn Next hệ thống yêu cầu tên Zone cần tạo tôi chọn là vnexperts.net</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000844.JPG" /></div> <div align="justify"> Sau khi gõ tên đầy đủ của Zone cần tạo ra bạn nhấn Next để thực hiện bước tiếp tục, chọn Allow Dynamic Update đây là bắt buộc để khi cài đặt Active Directory sẽ tự động ghi các Record vào DNS</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000845.JPG" /></div> <div align="justify"> Nhấn Next và kết thúc quá trình tạo Zone mới trong DNS. Công việc của bạn chưa kết thúc, bạn vào DNS chọn Zone vừa tạo ra sẽ thấy hai Record là SOA và NS.</div> <div align="justify"> - Cần phải chỉnh sửa hai Record này để quá trình cài đặt chuẩn Active Directory, nhấp đúp vào SOA Record chỉnh lại bằng cách thêm vào phần đuôi các Record tên Zone vừa tạo ra.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000846.JPG" /></div> <div align="justify"> Chỉnh lại NS Record bằng cách tương tự.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000847.JPG" /></div> <div align="justify"> Tạo ra một Record để kiểm tra xem hệ thống DNS hoạt động đã chuẩn hay chưa. Ở đây tôi tạo ra một Host A record là Server01.vnexperts.net địa chỉ IP là 192.168.100.11.</div> <div align="justify"> - Chuột phải vào vnexperts.net Zone chọn Host A record</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000848.JPG" /></div> <div align="justify"> Kiểm tra hoạt động của DNS bằng cách vào run gõ CMD trong cửa sổ này chọn:</div> <div align="justify"> Ping server01.vnexperts.net nếu có reply là ok.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000849.JPG" /></div> <div align="justify"> OK hoàn tất quá trình cài đặt và thiết lập DNS chuẩn bị cho việc cài đặt Active Directory.</div> <div align="justify"> <strong>2. Cài đặt Active Directory trên máy chủ Windows Server 2003</strong></div> <div align="justify"> Chúng ta có thể vào cửa sổ Manage Your Server chọn Add or Remove a Role để cài đặt Active Directory nhưng cách mọi người hay sử dụng là vào Run gõ dcpromo.</div> <div align="justify"> - Vào Run gõ dcpromo sẽ xuất hiện cửa sổ sau</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000850.JPG" /></div> <div align="justify"> Các bạn nhấn Next để tiếp tục quá trình cài đặt Active Directory. Vào cửa sổ giới thiệu tương thích với các Windows của Active Directory.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000851.JPG" /></div> <div align="justify"> Nhấn Next để tiếp tục, trong cửa sổ này bạn phải lựa chọn giữa hai Options:</div> <div align="justify"> - Domain Controller for a New domain: Là thiết lập tạo ra Domain Controller đầu tiên trong Domain</div> <div align="justify"> - Additional domain Controller …: là lựa chọn để cài đặt them một máy chủ DC vào cho một Domain, với thiết lập Hai hay nhiều DC cho một Domain đáp ứng được khi một máy chủ bị sự cố xảy ra thì hệ thống vẫn hoạt động bình thường. Ở đây bạn chọn Option: Domain Controller for a New Domain để cài đặt Máy chủ Domain Controller đầu tiên trên Domain.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000852.JPG" /></div> <div align="justify"> Sau khi lựa chọn Options trên bạn nhấn Next để tiếp tục quá trình cài đặt.</div> <div align="justify"> - Trong cửa sổ tiếp theo này có ba Options vô cùng quan trọng để khi bạn cài đặt Domain Controller.</div> <div align="justify"> - Domain in a new forest: Cài đặt máy chủ Domain Controller đầu tiên trên Forest sẽ phải lựa chọn thiết lập này ví dụ ở đây tôi cài cho domain đầu tiên là: vnexperts.net phải lựa chọn Options này.</div> <div align="justify"> - Child domain in an existing domain tree: Nếu khi tôi đã có domain vnexperts.net mà tôi lại muốn cài đặt các domain con bên trong của nó như: mcsa.vnexperts.net, hay ccna.vnexperts.net thì tôi phải lựa chọn Options này.</div> <div align="justify"> - Domain tree in an existing forest: Nếu tôi muốn tạo một domain khác với tên vne.vn cùng trong forest vnexperts.net tôi sẽ phải lựa chọn Options này</div> <div align="justify"> - Cả hai options dưới là việc cài đặt Multiple domain sẽ được trình bày ở các bài viết sau trong bài viết này tôi trình bày cài đặt máy chủ Domain Controller đầu tiên trong Domain.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000853.JPG" /></div> <div align="justify"> Lựa chọn Options đầu tiên rồi nhấn Next tiếp tục quá trình cài đặt, Trong bước này hệ thống yêu cầu bạn là: Máy chủ Domain Controller này quản lý Domain tên là gì tôi gõ vnexperts.net</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000854.JPG" /></div> <div align="justify"> Nhấn Next để tiếp tục, lựa chọn NetBIOS name cho Domain. NetBIOS name chính là tên của Domain xuất hiện khi client đăng nhập vào hệ thống. Bạn để mặc định</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000855.JPG" /></div> <div align="justify"> Nhấn Next bạn cần phải lựa chọn nơi chứa thư mục NTDS cho quá trình Replications của hệ thống Domain Controller:</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000856.JPG" /></div> <div align="justify"> Nhấn Next để tiếp tục, bạn cần phải thiết lập nơi lưu trữ thư mục SYSVOL đây là thư mục bắt buộc phải để trong Partition định dạng NTFS, với tác dụng chứa các dữ liệu để Replication cho toàn bộ Domain Controller trong Domain. Nếu mặc định hệ thống sẽ để tại thư mục %systemroot%\SYSVOL</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000857.JPG" /></div> <div align="justify"> Nhấn Next để tiếp tục, bước này hệ thống sẽ hiển thị các thong tin về DNS đã được cấu hình chuẩn chưa và các thong tin về Domain… thể hiện ở hình dưới đây. Nếu trong bước này mà hệ thống báo lỗi bạn cần phải thực hiện lại các bước trong cài đặt và thiết lập DNS.</div> <div align="justify"> - Ở đây toàn bộ đã thiết lập chuẩn</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000858.JPG" /></div> <div align="justify"> Giờ là bước bạn nhấn Next, và lựa chọn Mode cho Domain.</div> <div align="justify"> - Domain Function Level có 4 Mode là</div> <div align="justify"> - Mix Mode là Active Directory được tạo ra bởi cả Windows NT Server, Windows 2000 Server, và Windows 2003 Server. Trong Mode này Active Directory không có một số tính năng cao cấp của Windows Server 2000, và Windows Server 2003, nhưng bạn sẽ phải buộc cài Mode này khi bạn Joint hệ thống windows 2003 mới vào hệ thống Windows NT cũ đang hoạt động.</div> <div align="justify"> - Native Mode: Active Directory được tạo trên nền tảng Windows Server 2000 và Windows Server 2003 nên có gần như đầy đủ hết các tính năng cao cấp của Active Directory</div> <div align="justify"> - Interim Mode: được tạo ra bởi Windows NT và Windows Server 2003 tương tự như Mix Mode</div> <div align="justify"> - 2003 Mode: Là mode cao nhất hỗ trợ đầy đủ nhất toàn bộ các tính năng của Windows Server 2003.</div> <div align="justify"> - Ở đây trong bước này tôi chọn là mode Native</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000859.JPG" /></div> <div align="justify"> Nhấn Next để tiếp tục quá trình cài đặt, Hệ thống yêu cầu thiết lập Password trong Restore Mode.</div> <div align="justify"> - Khi bạn backup Active Directory là hoàn toàn dễ dàng trong Windows Server 2003 bởi hệ thống sử dụng cơ chế Shadow Backup, cho phép backup cả những dữ liệu, file, service đang hoạt động.</div> <div align="justify"> - Nhưng khi bạn Restore lại sẽ là cả vấn đề, Windows không cho can thiệp vào File, hay dữ liệu đang được sử dụng, và khi đó bạn phải khởi động hệ thống vào Mode mà Active Directory không hoạt động thì mới Restore được. Nội dung này sẽ trình bày trong phần sau, Password đặt trong phần này chính là Password để đăng nhập vào hệ thống khi Restore lại Active Directory.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000860.JPG" /></div> <div align="justify"> Sau đặt Password bạn nhấn Next hệ thống sẽ cho bạn hiển thị toàn bộ thông tin như:</div> <div align="justify"> - NetBIOS name ở đây là VNEXPERTS</div> <div align="justify"> - Folder chứa dữ liệu của Active Directory là NTDS ở đâu</div> <div align="justify"> - Tương tự vậy các folder SYSVOL</div> <div align="justify"> - Hệ thống sẽ thông báo là Password đăng nhập vào Domain của User Administrator sẽ tương tự như Password đăng nhập của User Administrator trước khi cài Active Directory.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000861.JPG" /></div> <div align="justify"> Nhấn Next bắt đầu tiến hành cài đặt Active Directory</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000862.JPG" /></div> <div align="justify"> Đợi vài phút cho đến khi hệ thống thong báo hoàn thành và yêu cầu khởi động lại là bạn đã hoàn tất quá trình cài đặt Active Directory trên máy chủ Windows Server 2003.</div> <div align="justify"> <img alt="" src="http://vnexperts.net/images/stories/vne000863.JPG" /></div> <div align="justify"> Trong Phần tiếp theo tôi sẽ trình bày cách Add them một máy chủ Domain Controller vào một Domain đã có sẵn và cách Backup cũng như Restore Active Dicrectory.</div> <div align="justify"> <strong>Theo Vnexperts Research Department</strong></div> </span>

Active Directory toàn tập - Phần 1+2

Active Directory là dịch vụ hệ thống quan trọng bậc nhất với vai trò quản lý dữ liệu người dùng, máy tính, groups, và các chính sách cũn...

Read more »

Công nghệ Big Data trong Y học

<h2 class="Lead"> <span style="font-size: small;">Asadi là nhà sáng lập, đồng thời là Giám đốc điều hành của công ty Bina, công ty chuyên về các lĩnh vực chăm sóc sức khỏe. Mục tiêu của Bina là đưa y tế gần gũi hơn và phù hợp với điều kiện của mỗi người.</span></h2> <div class="Normal"> Tại đây, công nghệ Big Data được áp dụng vào phân tích gen, giúp phân tích trình tự bộ gen người trong một vài giờ, thay vì tới hàng tuần như trước kia.</div> <div class="Normal"> Bina đã cho ra những sản phẩm thương mại đầu tiên sau giai đoạn sản xuất thử nghiệm. Nền tảng do Bina xây dựng cho phép các bác sĩ, nhà nghiên cứu bức tranh chi tiết về sức khỏe bệnh nhân. Căn cứ vào đó, các bác sĩ có thể đưa ra những chẩn đoán và kê đơn thuốc chính xác theo từng bệnh án.</div> <div class="Normal"> <br /></div> <div class="Normal"> Trong buổi phỏng vấn với hãng VentureBeat, sáng lập viên kiêm Giám đốc điều hành Narges Bani Asadi cho biết: “ Y học ngày này dựa trên các kết quả thực nghiệm. Trước đây, tình trạng quá tải do cùng một lúc nhiều dữ liệu gen đổ dồn vào một chỗ. Tại Bina, chúng tôi đưa ra những giải pháp nhanh nhất, chính xác nhất và chi phí hiệu quả nhất có thể trên thị trường. Bước tiếp theo là sử dụng những dữ liệu về gen này trong y học hiện đại. Y học dựa trên số liệu, thông tin có mang tính chuyên sâu cho từng đối tượng hơn. Những phương pháp trị liệu riêng cho từng bệnh nhân với những bệnh án khác nhau đồng nghĩa với một cuộc sống chất lượng và tốt đẹp hơn cho con người”.</div> <div class="Normal"> <br /></div> <div class="Normal"> Có tới hàng nghìn chứng rối loạn gen. Chỉ riêng trong năm 2013, hơn 580.000 người Mỹ tử vong vì ung thư. Trong khi đó, một trong 20 trẻ sơ sinh chào đời tại quốc gia này phải cần đến chăm sóc đặc biệt cho trẻ sơ sinh và 20% số ca tử vong trẻ sơ sinh xuất phát từ khuyết tật bẩm sinh hoặc lỗi nhiễm sắc thể. </div> <div class="Normal"> Tuy nhiên, công nghệ có thể được áp dụng để chặn đứng những xu hướng nguy hiểm này. Vai trò của Bina là chiếc cầu nối giữa công nghệ trình tự gen và những bác sĩ để họ áp dụng công nghệ này vào thực tiễn.</div> <div class="Normal"> Ông Mark Sutherland, Phó Chủ tịch khối phát triển kinh doanh Bina cho hay: “Các trường đại học Y khoa chỉ có thể nghiên cứu một vài mẫu bởi sẽ khá phức tạp và tốn kém khi triển khai nghiên cứu trên quy mô lớn. Có một làn sóng dữ liệu vẫn chưa được nắm rõ cũng như những cấu trúc bác sỹ vẫn chưa hoàn toàn hiểu cặn kẽ”.</div> <div class="Normal"> Theo Mark: “chúng ta đang chứng kiến sự thay đổi bước ngoặt. Giải mã trình tự gen là một cách rất tốt để theo dõi một dải rộng gen để từ đó đưa ra những nhận định về nguyên nhân từng loại bệnh và tiến hành đánh giá rủi ro, phát hiện sớm hoặc dự đoán khả năng tái phát. Công nghệ này cũng có thể được sử dụng để đưa ra những phương pháp trị liệu và hướng điều trị phù hợp với từng bệnh nhân”.</div> <div class="Normal"> <br /></div> <div class="Normal"> Asadi cho biết nhóm bà phải đạt được những đột phá trong mọi công đoạn gen để tạo ra giải pháp mang tính hiệu quả, có thể nhân rộng. Nền tảng của Bina bao gồm một hộp phần cứng để thu thập DNA, một phần mềm cao cấp xử lý dữ liệu và nhiều ứng dụng để biến dữ liệu thành công cụ hiểu quả cho thực tiễn.</div> <div class="Normal"> Gói phân tích gen tổng thế hiện nay mất nhiều tuần hoặc thậm chí nhiều tháng và chi phí lên tới hàng nghìn đô la. Trong khi đó, gói giải pháp của Bina khá tiết kiệm, chỉ tiêu tốn 200 đô la cho một mẫu.</div> <div class="Normal"> Công nghệ này đã được tiến sĩ Asadi nghiên cứu ở Stanford. Bà cộng tác với nhiều Giáo sư khác từ nhiều nơi trên thế giới để ứng dụng năng lực tính toán xử lý ở mức cao cấp và kiến trúc của máy tính để hiểu biết hơn về sức khỏe và bệnh tật con người. </div> <div class="Normal"> Bina được thành lập năm 2011 bởi ba Giáo sư từ Đại học California ở Berkeley và Standford. Công ty được gây vốn bởi quỹ đầu tư mạo hiểm. Khách hàng đầu tiên bao gồm khoa Gen thuộc trường đại học Standford và bệnh viện Palo Alto Veteran Affairs.</div> <div class="Normal"> Các công ty mới khởi nghiệp thường không đặt mục tiêu sẽ chữa trị tận gốc ung thu hoặc giảm thiểu tử vong ở trẻ sơ sinh. Tuy nhiên, khi công nghệ ngày một phát triển, cũng như toàn ngành Y đang có những bước tiến mới, chẩn đoán và điều trị dựa trên những dữ liệu phục vụ cho từng đối tượng sẽ thành hiện thực trong thời gian tới.</div> <div class="Normal"> Big Data là một trong những xu hướng FPT đang hướng tới khi đưa công nghệ này vào thực tiễn tại Việt Nam. FPT cũng góp sức trong các dự án thống minh hạ tầng của hạ tầng, trong đó ngành Y tế là một thành tố quan trọng.</div> <div align="right" class="Normal"> <b style="mso-bidi-font-weight: normal;">Nam Lê</b> <em>(Theo Venture Beat)</em></div> <div align="right" class="Normal"> <br /></div> <div class="Normal"> <br /></div> <div class="Normal"> <br /></div> <div class="Normal"> <br /></div> <h2 class="Lead">  </h2>

Công nghệ Big Data trong Y học

Asadi là nhà sáng lập, đồng thời là Giám đốc điều hành của công ty Bina, công ty chuyên về các lĩnh vực chăm sóc sức khỏe. Mục tiêu của B...

Read more »

Khái niệm cơ bản Hadoop

<div> HDFS: Nếu bạn muốn có hơn 4000 máy tính làm việc với dữ liệu của bạn, thì tốt hơn bạn nên phổ biến dữ liệu của bạn trên hơn 4000 máy tính đó. HDFS thực hiện điều này cho bạn. HDFS có một vài bộ phận dịch chuyển. Các Datanode (Nút dữ liệu) lưu trữ dữ liệu của bạn và Namenode (Nút tên) theo dõi nơi lưu trữ các thứ. Ngoài ra còn có những thành phần khác nữa, nhưng như thế đã đủ để bắt đầu.</div> <div> <br /></div> <div> MapReduce: Đây là mô hình lập trình cho Hadoop. Có hai giai đoạn, không ngạc nhiên khi được gọi là Map và Reduce. Để gây ấn tượng với các bạn bè của bạn hãy nói với họ là có một quá trình shuffle-sort (ND.: một quá trình mà hệ thống thực hiện sắp xếp và chuyển các kết quả đầu ra của map tới các đầu vào của các bộ rút gọn) giữa hai giai đoạn Map và Reduce. JobTracker (Trình theo dõi công việc) quản lý hơn 4000 thành phần công việc MapReduce. Các TaskTracker (Trình theo dõi nhiệm vụ) nhận các lệnh từ JobTracker. Nếu bạn thích Java thì viết mã bằng Java. Nếu bạn thích SQL hoặc các ngôn ngữ khác không phải Java thì rất may là bạn có thể sử dụng một tiện ích gọi là Hadoop Streaming (Luồng dữ liệu Hadoop).</div> <div> <br /></div> <div> Hadoop Streaming: Một tiện ích để tạo nên mã MapReduce bằng bất kỳ ngôn ngữ nào: C, Perl, Python, C++, Bash, v.v. Các ví dụ bao gồm một trình mapper Python và một trình reducer AWK.</div> <div> Hive và Hue: Nếu bạn thích SQL, bạn sẽ rất vui khi biết rằng bạn có thể viết SQL và yêu cầu Hive chuyển đổi nó thành một tác vụ MapReduce. Đúng là bạn chưa có một môi trường ANSI-SQL đầy đủ, nhưng bạn có 4000 ghi chép và khả năng mở rộng quy mô ra nhiều Petabyte. Hue cung cấp cho bạn một giao diện đồ họa dựa trên trình duyệt để làm công việc Hive của bạn.</div> <div> <br /></div> <div> Pig: Một môi trường lập trình mức cao hơn để viết mã MapReduce. Ngôn ngữ Pig được gọi là Pig Latin. Bạn có thể thấy các quy ước đặt tên hơi khác thường một chút, nhưng bạn sẽ có tỷ số giá-hiệu năng đáng kinh ngạc và tính sẵn sàng cao.</div> <div> <br /></div> <div> Sqoop: Cung cấp việc truyền dữ liệu hai chiều giữa Hadoop và cơ sở dữ liệu quan hệ yêu thích của bạn.</div> <div> <br /></div> <div> Oozie: Quản lý luồng công việc Hadoop. Oozie không thay thế trình lập lịch biểu hay công cụ BPM của bạn, nhưng nó cung cấp cấu trúc phân nhánh if-then-else và điều khiển trong phạm vi tác vụ Hadoop của bạn.</div> <div> <br /></div> <div> HBase: Một kho lưu trữ key-value có thể mở rộng quy mô rất lớn. Nó hoạt động rất giống như một hash-map để lưu trữ lâu bền (với những người hâm mộ python, hãy nghĩ đến một từ điển). Nó không phải là một cơ sở dữ liệu quan hệ, mặc dù có tên là HBase.</div> <div> <br /></div> <div> FlumeNG: Trình nạp thời gian thực để tạo luồng dữ liệu của bạn vào Hadoop. Nó lưu trữ dữ liệu trong HDFS và HBase. Bạn sẽ muốn bắt đầu với FlumeNG, để cải thiện luồng ban đầu.</div> <div> <br /></div> <div> Whirr: Cung cấp Đám mây cho Hadoop. Bạn có thể khởi động một hệ thống chỉ trong vài phút với một tệp cấu hình rất ngắn.</div> <div> <br /></div> <div> Mahout: Máy học dành cho Hadoop. Được sử dụng cho các phân tích dự báo và phân tích nâng cao khác.</div> <div> <br /></div> <div> Fuse: Làm cho hệ thống HDFS trông như một hệ thống tệp thông thường, do đó bạn có thể sử dụng lệnh ls, cd, rm và những lệnh khác với dữ liệu HDFS.</div> <div> <br /></div> <div> Zookeeper: Được sử dụng để quản lý đồng bộ cho hệ thống. Bạn sẽ không phải làm việc nhiều với Zookeeper, nhưng nó sẽ làm việc rất nhiều cho bạn. Nếu bạn nghĩ rằng bạn cần viết một chương trình có sử dụng Zookeeper thì bạn hoặc là rất, rất thông minh và bạn có thể là một ủy viên cho một dự án Apache hoặc bạn sắp có một ngày rất tồi tệ.<br /> <br /> <div class="separator" style="clear: both; text-align: center;"> <a href="https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEgjtNCtzxQNZxooBMvyh52-2aCP47BVi7dnj0LePedsgym04EIgH14lrMDlEFLKyLrQLKU-QEvgo2LxVUsHWqrLwZwhgkSmc5-v5YwByTOd7c2nsY2sdvdNEnYFrZpJpxiy6qYGlZHtZqs/s1600/hdfs_mapred.gif" imageanchor="1" style="margin-left: 1em; margin-right: 1em;"><img border="0" height="206" src="https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEgjtNCtzxQNZxooBMvyh52-2aCP47BVi7dnj0LePedsgym04EIgH14lrMDlEFLKyLrQLKU-QEvgo2LxVUsHWqrLwZwhgkSmc5-v5YwByTOd7c2nsY2sdvdNEnYFrZpJpxiy6qYGlZHtZqs/s1600/hdfs_mapred.gif" width="400" /></a></div> <br /></div> <div> <br /></div> <div> HDFS, tầng dưới cùng, nằm trên một cụm phần cứng thông thường. Các máy chủ lắp vào tủ khung (rack-mounted) đơn giản, mỗi máy chủ có các CPU lõi 2-Hex, 6 đến 12 đĩa và 32 Gb ram. Đối với một công việc map-reduce, tầng trình ánh xạ đọc từ các đĩa ở tốc độ rất cao. Trình ánh xạ phát ra các cặp khóa giá trị được sắp xếp và được đưa tới trình rút gọn và tầng trình rút gọn tóm lược các cặp key-value. Không, bạn không phải tóm lược các cặp key-value, trên thực tế bạn có thể có một tác vụ map-reduce chỉ có có các trình ánh xạ. Điều này sẽ trở nên dễ hiểu hơn khi bạn xem ví dụ python-awk.</div>

Khái niệm cơ bản Hadoop

HDFS: Nếu bạn muốn có hơn 4000 máy tính làm việc với dữ liệu của bạn, thì tốt hơn bạn nên phổ biến dữ liệu của bạn trên hơn 4000 máy tính đ...

Read more »

CCNP Hand on Lab - CIT

<br /> <ol> <li><a href="http://phangiatech.vn/CIT/cit-01.swf" target="_blank">Network Discovery Host Mapping</a></li> <li><a href="http://phangiatech.vn/CIT/cit-02.swf" target="_blank">Network Discovery Verification</a></li> <li><a href="http://phangiatech.vn/CIT/cit-03.swf" target="_blank">TCP/IP Troubleshoot Vegas</a></li> <li><a href="http://phangiatech.vn/CIT/cit-04.swf" target="_blank">TCP/IP Troubleshoot AR1&CORE</a></li> <li>Error</li> <li><a href="http://phangiatech.vn/CIT/cit-06.swf" target="_blank">ISDN Connectivity Extended Ping</a></li> <li><a href="http://phangiatech.vn/CIT/cit-07.swf" target="_blank">ISDN Coonectivity Ping Debug</a></li> <li><a href="http://phangiatech.vn/CIT/cit-08.swf" target="_blank">ISDN Connectivity External Debug </a></li> <li><a href="http://phangiatech.vn/CIT/cit-09.swf" target="_blank">AppleTalk Network Problem</a></li> <li><a href="http://phangiatech.vn/CIT/cit-10.swf" target="_blank">Serial Connectivity </a></li> <li><a href="http://phangiatech.vn/CIT/cit-11.swf" target="_blank">Intermittent Connectivity</a></li> <li><a href="http://phangiatech.vn/CIT/cit-12.swf" target="_blank">Layer Three Connectivity</a></li> <li><a href="http://phangiatech.vn/CIT/cit-13.swf" target="_blank">Troubleshoot in an IP network</a></li> <li><a href="http://phangiatech.vn/CIT/cit-14.swf" target="_blank">Connectivity in an IP Network</a></li> <li><a href="http://phangiatech.vn/CIT/cit-15.swf" target="_blank">TroubleShoot a IPX Network</a></li> <li><a href="http://phangiatech.vn/CIT/cit-16.swf" target="_blank">Connectivity in an IPX Network</a></li> <li><a href="http://phangiatech.vn/CIT/cit-17.swf" target="_blank">Wrong encap for Serial Link</a></li> </ol>

CCNP Hand on Lab - CIT

Network Discovery Host Mapping Network Discovery Verification TCP/IP Troubleshoot Vegas TCP/IP Troubleshoot AR1&CORE Error ISDN C...

Read more »

CCNP Hand on Lab - BCRAN (Building Cisco Remote Access Networks)

<div class="separator" style="clear: both; text-align: center;"> <a href="https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEhg6ikTP0alyYXE4tLp4x7uDgtq3lftWhUicfPMWG4TIKqA_5kIdVzjSHBMrefTDmEA_lTWPf8xFG3TAe6LfXI0Cp6bIZCeF6Kzde7TToElYQ6dtYBpv__KS4CPuMYbmuUMIxG6RlK1ZdY/s1600/bcmsnlab-thumb.gif" imageanchor="1" style="margin-left: 1em; margin-right: 1em;"><img border="0" height="456" src="https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEhg6ikTP0alyYXE4tLp4x7uDgtq3lftWhUicfPMWG4TIKqA_5kIdVzjSHBMrefTDmEA_lTWPf8xFG3TAe6LfXI0Cp6bIZCeF6Kzde7TToElYQ6dtYBpv__KS4CPuMYbmuUMIxG6RlK1ZdY/s640/bcmsnlab-thumb.gif" width="640" /></a></div> <br /> <ol> <li>BCRAN-Initial Configure<br />Link to Lab: <a href="http://adf.ly/bP1eb" target="_blank">Initial Configure</a></li> <li>BCRAN-Configure Serial Interface Line<br />Link to Lab: <a href="http://adf.ly/bP1np" target="_blank">Configure Serial Interface Line</a></li> <li>BCRAN-Configuring the Center Modem<br />Link to Lab: <a href="http://adf.ly/bP217" target="_blank">Configuring the Center Modem</a></li> <li>BCRAN-Configuring The PC Modem<br />Link to Lab: <a href="http://adf.ly/bP5By" target="_blank">Configuring The PC Modem</a></li> <li>BCRAN-PPP and Telnet on the Centre Site<br />Link to Lab: <a href="http://adf.ly/bP5Sl" target="_blank">PPP and Telnet on the Centre Site</a></li> <li>BCRAN-Configure ISDN BRI<br />Link to Lab: <a href="http://adf.ly/bP5YH" target="_blank">Configure ISDN BRI</a></li> <li>BCRAN-Configure ISDN PRI<br />Link to Lab: <a href="http://adf.ly/bP5i7" target="_blank">Configure ISDN PRI</a></li> <li>BCRAN-Verifying ISDN Connection<br />Link to Lab: <a href="http://adf.ly/bP5kr" target="_blank">Verifying ISDN Connection</a></li> <li>BCRAN-Incoming a Sync Calls<br />Link to Lab: <a href="http://adf.ly/bP5r7" target="_blank">Incoming a Sync Calls</a></li> <li>BCRAN-Config.Home to Comm. Central<br />Link to Lab: <a href="http://adf.ly/bP5vv" target="_blank">Config.Home to Comm. Central</a></li> <li><a href="http://adf.ly/bQRPu" target="_blank">Configuring the 3640</a></li> <li><a href="http://adf.ly/bQRZ7" target="_blank">Configuring X.25 Transport</a></li> <li><a href="http://adf.ly/bQRgm" target="_blank">Frame Relay Subinterface</a></li> <li><a href="http://adf.ly/bQRnJ" target="_blank">Config. Frame Relay Branch</a></li> <li><a href="http://adf.ly/bQRwB" target="_blank">Frame Relay Traffic Shaping</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-16.swf" target="_blank">Verify Frame Relay Operation</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-17.swf" target="_blank">Preparing BRI Interface Backup Dialing</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-18.swf" target="_blank">Establising a Bakup Coonect </a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-19.swf" target="_blank">Configuring Custom Query</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-20.swf" target="_blank">Preparing Network</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-21.swf" target="_blank">Construsting Priority List</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-22.swf" target="_blank">Verifying Custom Configuration</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-23.swf" target="_blank">Static Netword Add. Translation</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-24.swf" target="_blank">Dynamic Network Addr, Translation</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-25.swf" target="_blank">Securing Access</a></li> <li><a href="http://phangiatech.vn/BCRAN/bcran-26.swf" target="_blank">Securing Access</a></li> </ol>

CCNP Hand on Lab - BCRAN (Building Cisco Remote Access Networks)

BCRAN-Initial Configure Link to Lab:  Initial Configure BCRAN-Configure Serial Interface Line Link to Lab:  Configure Serial Interface ...

Read more »

CCNP-Hand on Lab-BSCN

<div class="separator" style="clear: both; text-align: center;"> <a href="https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEi6Cy3KZhuH9Bk26sR4lfCoofafmEWR49CWcSbOrJD3q3yNwZYeSWuV_3_IFqueqGro1V6f-NfzWD5wtYrp3WhkeVS-6ZQtv4Bhls9KXdKz5eXsRcKul9grV74XSU-MhsqPnImEOLCL5Gs/s1600/bcmsnlab-thumb.gif" imageanchor="1" style="margin-left: 1em; margin-right: 1em;"><img border="0" height="456" src="https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEi6Cy3KZhuH9Bk26sR4lfCoofafmEWR49CWcSbOrJD3q3yNwZYeSWuV_3_IFqueqGro1V6f-NfzWD5wtYrp3WhkeVS-6ZQtv4Bhls9KXdKz5eXsRcKul9grV74XSU-MhsqPnImEOLCL5Gs/s640/bcmsnlab-thumb.gif" width="640" /></a></div> <div class="separator" style="clear: both; text-align: center;"> CCNP virtual Lab Simulation</div> <ol> <li>CCNP Lab : Network Discovery Router 1<br />CCNP Link : <a href="http://adf.ly/bMW3J" target="_blank">Network Discovery Router 1</a> </li> <li>CCNP Lab : Network Discovery Router 2<br />CCNP Link : <a href="http://adf.ly/bMXl5" target="_blank">Network Discovery Router 2</a></li> <li>CCNP Lab : Network Discovery Router 2<br />CCNP Link : <a href="http://adf.ly/bMY6O" target="_blank">Network Discovery Router 3</a></li> <li>CCNP Lab : IP Helper Addess Commmand<br />CCNP Link : <a href="http://adf.ly/bMYQw" target="_blank">IP Helper Address Command</a></li> <li>CCNP Lab : Configuring Single Area OSPF<br />CCNP Link : <a href="http://adf.ly/bMYiq" target="_blank">Configuring Single Area OSPF</a></li> <li>CCNP Lab : Verifying Single Area OSPF<br />CCNP Link : <a href="http://adf.ly/bMYrw" target="_blank">Verifying Single Area OSPF</a></li> <li>CCNP Lab : Config OSPF NBMA Environment<br />CCNP Link : <a href="http://adf.ly/bMZ5q" target="_blank">Config OSPF NBMA Environment</a></li> <li>CCNP Lab : Enabling OSPF-NBMA Network<br />CCNP Link: <a href="http://adf.ly/bMZGe" target="_blank">Enabling OSPF-NBMA Network</a></li> <li>CCNP Lab:  Config. Multi-area OSPF Network<br />CCNP Link : <a href="http://adf.ly/bMZeA" target="_blank">Config. Multi-area OSPF Network</a></li> <li>CCNP Lab:  Verify Multi-area OSPF Network<br />CCNP Link : <a href="http://adf.ly/bMa1W" target="_blank">Verify Multi-area OSPF Network</a></li> <li>CCNP Lab: Sub Area<br />CCNP Link : <a href="http://adf.ly/bMang" target="_blank">Sub Area</a></li> <li>CCNP Lab:  Totally Stubby Area<br />CCNP Link: <a href="http://adf.ly/bMavU" target="_blank">Totally Stubby Areas</a></li> <li>CCNP Lab : Not So Stubby Areas-Create<br />CCNP Link : <a href="http://adf.ly/bMb6b" target="_blank">Not So Stubby Areas-Create</a></li> <li>CCNP Lab: Virtual Link Setup<br />CCNP Link : <a href="http://adf.ly/bMbJl" target="_blank">Virtual Link Setup</a></li> <li>CCNP Lab : Virtual Link Create<br />CCNP Link : <a href="http://adf.ly/bMbQB" target="_blank">Virtual Link Create</a></li> <li>CCNP Lab : Redundant EIGRP Router A-C<br />CCNP Link : <a href="http://adf.ly/bMbbl" target="_blank">Redundant EIGRP Router A-C</a></li> <li>CCNP Lab:  Reduntant EIGRP Router D&E<br />CCNP Link : <a href="http://adf.ly/bMbvd" target="_blank">Reduntant EIGRP Router D&E</a></li> <li>CCNP Lab:  Redundant EIGRP Test<br />CCNP Link : <a href="http://adf.ly/bMcFk" target="_blank">Redundant EIGRP Test</a></li> <li>CCNP Lab:  EIGRP Accross Frame-Relay I<br />CCNP Link: <a href="http://adf.ly/bMcaT" target="_blank">EIGRP Accross Frame-Relay I</a></li> <li>CCNP Lab:  EIGRP Accross Frame-Relay I<br />CCNP Link: <a href="http://adf.ly/bMdOa" target="_blank">EIGRP Across Frame-Relay II</a></li> <li>CCNP Lab : Configure BGP<br />CCNP Link : <a href="http://adf.ly/bMdaE" target="_blank">Configure BGP</a></li> <li>CCNP Lab : Configure Basic BGP<br />CCNP Link: <a href="http://adf.ly/bMdhN" target="_blank">Configuring Basic BGP</a></li> <li>CCNP Lab: Create a BGP Router Reflector<br />CCNP Link: <a href="http://adf.ly/bMdpP" target="_blank">Create a BGP Router Reflector</a></li> <li>CCNP Lab:  BGP Router Reflector AS 100<br />CCNP Link : <a href="http://adf.ly/bMdwC" target="_blank">BGP Router Reflector AS 100</a></li> <li>CCNP Lab:  BGP Router Reflect AS 100 and 300<br />CCNP Link : <a href="http://adf.ly/bMe7i" target="_blank">BGP Router Reflect AS 100 and 300</a></li> <li>CCNP Lab:  Router BGP Reflect Router C<br />CCNP Link: <a href="http://adf.ly/bMeHd" target="_blank">Router BGP Reflect Router C</a></li> <li>CCNP Lab:  Configuring BGP Connection Weight<br />CCNP Link: <a href="http://adf.ly/bMeet" target="_blank">Configuring BGP Connection Weight</a></li> <li>CCNP Lab:  Router Redist Router A and B<br />CCNP Link: <a href="http://adf.ly/bMelX" target="_blank">Router Redist Router A and B</a></li> <li>CCNP Lab:  Router BGP Reflect Router C<br />CCNP Link: <a href="http://adf.ly/bMepJ" target="_blank">Router Redist Router C and D</a></li> <li>CCNP Lab:  Router Redist Verification<br />CCNP Link: <a href="http://adf.ly/bMetF" target="_blank">Router Redist Verification</a></li> <li>CCNP Lab:  Modifying Redist Admin. Distance<br />CCNP Link: <a href="http://adf.ly/bMeyo" target="_blank">Modifying Redist Admin. Distance</a></li> <li>CCNP Lab:  Redistribution with Router Filter<br />CCNP Link: <a href="http://adf.ly/bMf30" target="_blank">Redistribution with Router Filter</a></li> <li>CCNP Lab:  Router Map Creater<br />CCNP Link: <a href="http://adf.ly/bMf8W" target="_blank">Router Map Creater</a></li> <li>CCNP Lab:  IGRP Intergration<br />CCNP Link: <a href="http://adf.ly/bMfCq" target="_blank">IGRP Intergration </a></li> <li>CCNP Lab:  Directed Broadcast Handing<br />CCNP Link: <a href="http://adf.ly/bMfHI" target="_blank">Directed Broadcast Handing</a></li> </ol>

CCNP-Hand on Lab-BSCN

CCNP virtual Lab Simulation CCNP Lab : Network Discovery Router 1 CCNP Link :  Network Discovery Router 1 CCNP Lab : Network Discover...

Read more »