Ca đẻ khó - móc data từ web động, help me !!!

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Các cao thủ IT, cao thủ web giúp em quả này với:

Em cần download tự động data từ các bảng trên 1 trang web động về máy tính của mình. Kể ra thấy cũng khó vì bảng nó chạy ngấu nhiên không có gì định vị cả, nhưng phải có cách gì chứ nhể ...
Trước đây mợ GT có bài lấy dữ liều về excel nhưng em tìm mãi không thấy, có thể lâu quá rồi.

Thanh kìu các cụ.
 

tranhainam

Xe điện
Biển số
OF-1008
Ngày cấp bằng
29/7/06
Số km
3,046
Động cơ
605,842 Mã lực
Nơi ở
Hapulico- 83 Vũ Trọng Phụng, Hà Nội
Kể cũng khó nhỉ, anh thử làm bằng cách ấn nút PrtScr trên bàn phím để dừng hình rồi ngồi cập nhật lại dữ liệu chưa, chắc dễ hơn
 

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Không, hỏi giải pháp cơ chứ không phải để làm 1 lần. Khó mới hỏi offer chứ, dễ hỏi Gúc rồi :)
 

dongnn

Xe tăng
Tưởng nhớ
Biển số
OF-38
Ngày cấp bằng
22/5/06
Số km
1,282
Động cơ
594,779 Mã lực
Nơi ở
HAN
Sao ko hỏi trực tiếp gt
 

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Hì hì, chưa hỏi ạ. Anh vào skype chém đê, đang vui :))
 

minhbb

Xe tải
Biển số
OF-106858
Ngày cấp bằng
26/7/11
Số km
262
Động cơ
396,000 Mã lực
Thực ra có nhiều cách, tuy nhiên có 2 cách thông thường như sau:
1. Load hẳn trang đó về theo dạng embed ==> chỉ có phần dữ liệu mình cần trong bảng nó load. Tất nhiên khi đó layout của nó mình không thay đổi được.
2. Chỉ load dữ liệu (cái này sẽ chậm hơn, có thể dùng SE):
- Load dữ liệu từ web về, filter rồi đẩy dữ liệu lên DB của mình==> load ra web của mình.

Cơ bản là thế còn nếu cần tìm hiểu kỹ hơn thì phải đọc tài liệu thôi. :)
 

imaXeo

Xe buýt
Biển số
OF-50696
Ngày cấp bằng
11/11/09
Số km
520
Động cơ
460,741 Mã lực
Các cao thủ IT, cao thủ web giúp em quả này với:

Em cần download tự động data từ các bảng trên 1 trang web động về máy tính của mình. Kể ra thấy cũng khó vì bảng nó chạy ngấu nhiên không có gì định vị cả, nhưng phải có cách gì chứ nhể ...
Trước đây mợ GT có bài lấy dữ liều về excel nhưng em tìm mãi không thấy, có thể lâu quá rồi.

Thanh kìu các cụ.
Cái này đơn giản thôi cụ ạ. Em chưa hiểu mục đích của cụ lắm. Cụ dùng làm dữ liệu để phục vụ công việc của cụ ở máy tính, hay móc về website của cụ.
Cả 2 mục đích trên thì vẫn phải viết 1 cái soft/script, để crawl các thông tin từ site đó về.

Cụ PM cho em yêu cầu cụ thể em tư vấn cho :)
 
Chỉnh sửa cuối:

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Thực ra có nhiều cách, tuy nhiên có 2 cách thông thường như sau:
1. Load hẳn trang đó về theo dạng embed ==> chỉ có phần dữ liệu mình cần trong bảng nó load. Tất nhiên khi đó layout của nó mình không thay đổi được.
2. Chỉ load dữ liệu (cái này sẽ chậm hơn, có thể dùng SE):
- Load dữ liệu từ web về, filter rồi đẩy dữ liệu lên DB của mình==> load ra web của mình.

Cơ bản là thế còn nếu cần tìm hiểu kỹ hơn thì phải đọc tài liệu thôi. :)
Cái này đơn giản thôi cụ ạ. Em chưa hiểu mục đích của cụ lắm. Cụ dùng làm dữ liệu để phục vụ công việc của cụ ở máy tính, hay móc về website của cụ.
Cả 2 mục đích trên thì vẫn phải viết 1 cái soft/script, để crawl các thông tin từ site đó về.

Cụ PM cho em yêu cầu cụ thể em tư vấn cho :)
Vâng, em sẽ PM các cụ ngay. Mục đích em muốn auto load số liệu từ web về file lưu trên máy tính mình thôi ạ, để thống kê theo dõi ý mà.
Ngày xưa có làm cho bảng giá chứng khoán, tuy nó động nhưng cố định số dòng - cột.
Bây giờ gốc nó chạy tung tăng, chưa biết thế nào để tóm ạ.
Thank các cụ nhiều.
 

imaXeo

Xe buýt
Biển số
OF-50696
Ngày cấp bằng
11/11/09
Số km
520
Động cơ
460,741 Mã lực
Thực ra việc này quan trọng nhất là cái bố cục của thằng LiveScore nó phải cố định trong thời gian dài. Thì chắc chắn lấy ngon ơ cụ ạ. Ko có j khó cả.
Bố cục (layout) của web đều có quy luật và được định danh nên chương trình của mình hoàn toàn load về phân tích và trả kết quả được.

Khó quá thì cụ thuê bên em nhá :))
 

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Thực ra việc này quan trọng nhất là cái bố cục của thằng LiveScore nó phải cố định trong thời gian dài. Thì chắc chắn lấy ngon ơ cụ ạ. Ko có j khó cả.
Bố cục (layout) của web đều có quy luật và được định danh nên chương trình của mình hoàn toàn load về phân tích và trả kết quả được.

Khó quá thì cụ thuê bên em nhá :))
Vâng, nhờ không được thì thử tính chuyện thuê xem sao :)
 

ht_jsc

Xe hơi
Biển số
OF-23065
Ngày cấp bằng
28/10/08
Số km
125
Động cơ
494,710 Mã lực
Nếu là dân CNTT thì search google từ khóa là crawler. Nếu bác tính thuê thì tùy độ phức tạp, em nghĩ tầm 5 đến 20 củ là đặt hàng ngon. Chú thích thêm câu nữa là em làm được :D.
 

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Vầng, em lưu thông tin lại rồi.
Cảm ơn bác.
 

imaXeo

Xe buýt
Biển số
OF-50696
Ngày cấp bằng
11/11/09
Số km
520
Động cơ
460,741 Mã lực
Nếu là dân CNTT thì search google từ khóa là crawler. Nếu bác tính thuê thì tùy độ phức tạp, em nghĩ tầm 5 đến 20 củ là đặt hàng ngon. Chú thích thêm câu nữa là em làm được :D.
Vầng, em lưu thông tin lại rồi.
Cảm ơn bác.
Hihi, cụ bes làm cái này còn dễ, vì nó là thông tin public rất nhiều, ngày xưa cháu làm 1 cái project kiểu này cho hội nước ngoài, cứ mỗi site lại làm 1 con máy chủ :D lấy dữ liệu từng giây luôn. Mà đội phải ngồi canh thường xuyên vì sợ nó thay đổi layout phát là ngỏm củ tỏi hết.X_X
 

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Hihi, cụ bes làm cái này còn dễ, vì nó là thông tin public rất nhiều, ngày xưa cháu làm 1 cái project kiểu này cho hội nước ngoài, cứ mỗi site lại làm 1 con máy chủ :D lấy dữ liệu từng giây luôn. Mà đội phải ngồi canh thường xuyên vì sợ nó thay đổi layout phát là ngỏm củ tỏi hết.X_X
Quả này thì khủng nhể, nhà cháu hy vọng rồi cũng có lúc được như vậy ...
Nói thật là càng khó thì mới càng nhiều tiền, hề hề hề
Cháu sẽ quấy quả cả 2 cụ khi cần thiết, chắc chắn đấy ạ.
 

bes

Xe lăn
Biển số
OF-112
Ngày cấp bằng
7/6/06
Số km
14,502
Động cơ
721,148 Mã lực
Nơi ở
Km0 - Việt Nam
Hôm nay em gặp 1 cụ cũng ofer, xong hết rồi, kinh thật, chỉ với 80 dòng code.
=D>=D>=D>
 
Thông tin thớt
Đang tải
Top