[Funland] Bộ KH&ĐT cấm quét dữ liệu thầu, DauThau.info chính thức đi đời rồi ông giáo ạ

[xedithue]

Cái quy trình bản thân nó đã không có công khai rồi, nhưng do bắt phải đưa lên thì phải đưa nhưng rủi ro mất chỗ thì tìm mọi cách cất lại!
Nếu xác định đúng trách nhiệm nhà nước thì làm gì có cửa cho mấy thằng nhào vào chực sẵn ợ!

Chuẩn đấy cụ.Nếu quy trình cấp phát vốn nó ko có tiêu cực thì mấy thằng nhào bánh chắc bỏ nghề hết. Nhưng ko có mấy thằng nhào bánh nó ôm tiền đi mua thì mấy ông VP chú phỉnh, Bộ tài chén và Bộ Kế có mà đói mốc mép

 

[thanhp13]

Ký sinh trên data người khác thì chịu rủi ro thôi các cụ. Ở Vn có đầy team trước FB nó thả cửa cho lấy đc kha khá, về nguyên tắc thì càng ngày nó càng xiết chặt cả về bảo vệ dữ liệu cá nhân và chống lại việc crawl, nhất là để kinh doanh và cạnh tranh ở mức độ nào đó với chính nó.

Nói chung là chụp giật được một đoạn.

Data nào của người khác hả bác. Thông tin đấu thầu là thông tin phải công khai cho toàn dân, cơ quan nhà nước cũng là của dân bác ạ. Ông Bộ KH&ĐT phải có trách nhiệm giúp dân tiếp cận thông tin này ý chứ. Chưa nói đến việc dữ liệu đấu thầu công khai là dữ liệu mở, được quyền tự do tiếp cận, chia sẻ và thương mại, chả có lý do gì để cấm. Mọi người dân được làm những gì mà pháp luật không cấm mà, có giỏi thì Bộ KH&ĐT cấm sử dụng thông tin đấu thầu xem. Mà thực chất Bộ cũng có dám cấm bên dauthau.infor lấy dữ liệu này đâu, họ cấm dùng phần mềm quét thôi haha

 

[hieukon]

Vừa được giải xong? Thế thì tèo à?
Thông tin về gói thầu càng được cung cấp rộng rãi càng có cơ hội mua sắm giá rẻ chứ nhỉ?

nhiều không thích rẻ cụ ak

 

[Ga Leo Cay]

Đcm mang tiếng bộ KH&ĐT mà làm cái trang web như lol.

 

[freethinker]

Sang nước ngoài quét trang web VN thoải mái. Các cụ làm startup đều hiểu phần mềm mà không có data thì như chai không có rượu. Data của chính phủ công khai ai dùng mà chả được nước ngoài dùng, google dùng thì ko nói không phạt được trong khi startup VN dùng thì xyz. Cái này có mùi.

 

[kvboto]

Tình trạng dường như là Bộ muốn độc quyền dữ liệu, thông tin về đấu thầu, để phục vụ ý định sau này cái TT đó sẽ thương mại, kinh doanh các dữ liệu về đấu thầu như bán gói dịch vụ thông tin đấu thầu, tư vấn, đầu thầu thuê, sub sử dụng dữ liệu về đấu thầu,....

 

[Trăm hoa đua nở]

Gúc nó đi trước thiên hạ cả chục năm, nó chưa show ra không có nghĩa nó không múc được cụ ợ. Cháu tin là thế

Đặt dòng lệnh chặn rô bốt google quét thì sẽ không quét được cụ ạ. Ngoại trừ trường hợp google chủ ý muốn lấy cho mục đích khác thì không bàn, nhưng cái dữ liệu về đấu thầu ở VN chắc chúng nó coi như bãi...nên chắc cũng chả hy vọng được ngó ngàng.

 

[B18]

Tôi chưa học "một lớp đấu thầu cơ bản" nào.
Thỉnh thoảng vẫn trúng mới đau.

Như vậy, đồng chí là con đồng chí nào..???

 

[thanhp13]

Đặt dòng lệnh chặn rô bốt google quét thì sẽ không quét được cụ ạ. Ngoại trừ trường hợp google chủ ý muốn lấy cho mục đích khác thì không bàn, nhưng cái dữ liệu về đấu thầu ở VN chắc chúng nó coi như bãi...nên chắc cũng chả hy vọng được ngó ngàng.

Công nghệ của muasamcong cũ vãi nhái, Google có quét được đâu bác. Tồn tại 10 năm nay rồi mà được có 167k index. Trong khi dauthau.asia là tên miền mới từ tháng 2 đã có 417k index rồi

 

[butchikim]

Công nghệ của muasamcong cũ vãi nhái, Google có quét được đâu bác. Tồn tại 10 năm nay rồi mà được có 167k index. Trong khi dauthau.asia là tên miền mới từ tháng 2 đã có 417k index rồi
View attachment 6124312
View attachment 6124313

Bỏ xèng ra chạy quẳng kéo thì nhiều ngay

 

[f320]

Giờ nó cứ quét nhưng mồm bẩu cóp thủ công thì biết đấy là đâu???

 

[paulsteigel]

Giờ nó cứ quét nhưng mồm bẩu cóp thủ công thì biết đấy là đâu???

Chừng nào mà trang web muasamcong còn online thì thiếu gì cách để chạy lệnh tự động lấy thông tin nếu bên lấy thông tin muốn làm. Có nhiều cách để làm:
1. Lập chỉ mục bằng tay, vài ngày review một lần.
+ Ví dụ: Index thủ công để lấy danh sách:

http://muasamcong.mpi.gov.vn/web/guest/lua-chon-nha-thau?p_p_id=

luachonnhathau_WAR_bidportlet&p_p_lifecycle=1&p_p_state=normal&p_p_mode=view&p_p_col_id=column-1&p_p_col_count=2&_luachonnhathau_WAR_bidportlet_currentPage=1&_luachonnhathau_WAR_bidportlet_currentPage1=1&_luachonnhathau_WAR_bidportlet_currentPage2=1&_luachonnhathau_WAR_bidportlet_javax.portlet.action=list
... chừng nào chưa đổi mã nguồn trang web thì các tham số khai báo chuẩn là có thông tin ợ!
+ Lấy danh sách theo trang cho đến hết
+ Đọc từng kết quả trả về rồi đưa vào cơ sở dữ liệu.
Thông tin từng gói thầu dư nài đơi, từ kết quả mà biết cách tải cái gì về

http://muasamcong.mpi.gov.vn/web/guest/lua-chon-nha-thau?p_auth=

weJjl6IE&p_p_id=luachonnhathau_WAR_bidportlet&p_p_lifecycle=1&p_p_state=normal&p_p_mode=view&p_p_col_id=column-1&p_p_col_count=2&_luachonnhathau_WAR_bidportlet_id=320749&_luachonnhathau_WAR_bidportlet_name=8&_luachonnhathau_WAR_bidportlet_javax.portlet.action=detail
Riêng cái tôi bôi đậm weJjl6IE, nếu bị can thiệp thì dần các khách quét dạng bot, crawler (tần suất quét quá nhanh) sẽ cấm không cho thực hiện. Google hiện cũng có cách như vậy đối với dững ai dùng tính năng dịch online mà có tốc độ truy vấn quá cao, không phải người thường có thể làm được>> 100 yêu cầu/ giây từ 1 địa chỉ chả hạn.
Về phần tải file đính kèm thì phải có trình cao hơn tí... giả lập IE, rồi rà đến link và cách cấu tạo link mà xử
.....
2. Tìm cách thông minh để chui sâu hơn: cái này phải có sự cho phép của bên MPI.
thực tế thì bên các tờ báo nhiều tin tức của Mỹ cũng áp dụng chiến lược này để tránh các máy quét, nên bên cần thông tin đều phải thuê người thường xuyên làm Code quét mới bằng tay như kiểu tôi làm ở trên, mỗi lần mất chục đô là cả ngàn thằng rỗi việc như tôi vào làm ngay (10 phút làm xong).

Ở đầy có 2 khía cạnh
* Bên dauthau.infor thì tham, lười, muốn có thông tin nhiều, ngay, dễ mà không vận động xoay xở, bỏ tiển ra, cứ kêu la trước đã. Chừng nào bên web của bộ còn đưa thông tin ra thì chừng đó còn có cách lấy thông tin về. Bộ mà nó cố tình đập thì dauthau.infor chắc sẽ tèo!
* Bên bộ lo nguy cơ mất gói thầu về tay nhân dân nên dọn chỗ trước để đưa ra các giải pháp ngặt nghèo hơn >> bỏ công khai với tỷ lý do.
Cụ Chính mà không vào vụ này thì chắc chắn Bộ nó sẽ làm được (bài này em cho là do mấy ông Thứ khôn, lại biết công nghệ xì ra thoai) - haiz.
Em đồ rằng sẽ có 2 võ được triển trong thời gian tới:
1. Đập thằng đấu thầu cho đến chết: có khả năng cao, thu hết công cụ (domain, giấy phép kinh doanh...) thì nó tèo; >> hình thành các anh quét nhưng ngầm chứ không còn công khai;
2. Tìm cách chặn dần sự công khai: khó dưng có thể mần được, bắt phải đăng ký và lại thêm việc chỉ hiển thị một ít ra ngoài còn lại giấu tiệt: cái này cũng có vẻ không quá khó vì chưa biết cụ Hùng 4T có kịp ra chuẩn công khai thông tin không (cái gì phải công khai). May là có luật đấu thầu nó chưa kịp sửa không dám làm trái, nếu không ối anh tèo?
Còn về chuyện thầu tặc.... thì haiz, có thiếu gì cách làm khó nhà thầu chân chính, ờ mài chúng thầu, ngon nhảy vào đề (giá thấp >> chuẩn), mài xin giấy tao éo cho >>> xì tiền >> cách nài chỉ thầu tây nó bỏ thôi chứ nhà thầu ngon nhà ta vào thì cũng thành hư mà thiệt đơn thiệt kép, chưa kể bị thằng nhào bột thỉnh thoảng nó vào nó dằn cái mẹt!
Nhìn sâu hơn nữa, có vẻ trang muasamcong là lấy trọn mã nguồn của mấy ông Hàn cấp cho (http://www.g2b.go.kr/index.jsp - trang đấu thầu công của Hàn đơi ạ)

 window.open("http://muasamcong.mpi.gov.vn:8081/servlet/TC/EP_COV_TCQ302?gonggo_num="+gongo_no+"&gubun="+gubun+"&docType="+docType,"goAppGongDongSu","left=50, top=50, width=840, height=600, toolbar=no, scrollbars=yes, menubar=no, resizable=yes");
                //window.open("[B]http://www.g2b.go.kr:8081/servlet/TC/EP_COV_TCQ302[/B]?gonggo_num="+gongo_no+"&gubun="+gubun+"&docType="+docType,"goAppGongDongSu","left=50, top=50, width=840, height=600, toolbar=no, scrollbars=yes, menubar=no, resizable=yes");

Đã thế còn lười, không thèm sửa thông điệp nguồn...

Vừa mới cập nhập thông điệp cảnh báo hơi vô nghĩa nài ợ (bấm vào đường link tra cứu thì nó ra dư nài)

Mở bằng chrome thì không cho down tài liệu về, bảo quay lại IE... túm lại là bài kỹ thuật lòng vòng! Nhưng vì trang gốc của bên Hàn không có mấy thứ yêu cầu lởm này nên nếu bên dauthau.infor thực sự muốn họ vẫn có thể lấy được nhiều thứ họ cần về!
Chắc sẽ lại nhờ nâng cấp thoai! Chúc dauthau.infor và các cụ may mắn lần sau!

 

[Gừng]

Từ ngày có công cụ quét dữ liệu, "thầu tặc" quá lộng hành, chúng phỗng tay trên của các nhà thầu "chân chính" đã mất công theo gói thầu từ trong trứng nước

quét dữ liệu là sao cụ? e chưa thông lắm

 

[paulsteigel]

quét dữ liệu là sao cụ? e chưa thông lắm

cụ đọc bài 93 thì sẽ hiểu... hiện tại thì nó đang làm như tôi làm >> nhanh được ngay danh sách gói thầu và nhiều thông tin kèm theo. Bộ muốn chặn cái này nhưng ngại sửa code nên ra văn bản hành chính ngăn chặn quyền tiếp cận thông tin... thế thôi ạ!

 

[shiluo]

Ký sinh trên data người khác thì chịu rủi ro thôi các cụ. Ở Vn có đầy team trước FB nó thả cửa cho lấy đc kha khá, về nguyên tắc thì càng ngày nó càng xiết chặt cả về bảo vệ dữ liệu cá nhân và chống lại việc crawl, nhất là để kinh doanh và cạnh tranh ở mức độ nào đó với chính nó.

Nói chung là chụp giật được một đoạn.

Ai cạnh tranh với ai thế cụ?
Muasamcong còn phải cảm ơn nó vì nó đã góp phần giúp đưa thông tin đến nhà thầu tốt hơn (nhiệm vụ của thằng muasamcong)
Hay lại tư tưởng thấy thằng khác có miếng ăn là khó chịu mặc dù điều đấy có thể tốt cho mình. Kiểu như thà rằng lương mình 5tr lương đồng nghiệp 4tr còn hơn lương mình 8tr mà lương đồng nghiệp 10tr?

 

[Gừng]

cụ đọc bài 93 thì sẽ hiểu... hiện tại thì nó đang làm như tôi làm >> nhanh được ngay danh sách gói thầu và nhiều thông tin kèm theo. Bộ muốn chặn cái này nhưng ngại sửa code nên ra văn bản hành chính ngăn chặn quyền tiếp cận thông tin... thế thôi ạ!

vậy theo cụ

sau đợt này bonj đâuthau có bij sụp ko ạ?

e đang định mua dữ lieeuj bên nó vì muasamcong nhiều quá, dauthau nó soạn sawxn gói dữ liệu cho mình nên tiện hơn

 

[thanhp13]

2. Tìm cách chặn dần sự công khai: khó dưng có thể mần được, bắt phải đăng ký và lại thêm việc chỉ hiển thị một ít ra ngoài còn lại giấu tiệt: cái này cũng có vẻ không quá khó vì chưa biết cụ Hùng 4T có kịp ra chuẩn công khai thông tin không (cái gì phải công khai). May là có luật đấu thầu nó chưa kịp sửa không dám làm trái, nếu không ối anh tèo?

Bộ 4T có nghị định quy định về dữ liệu mở rồi đấy bác (nghị định 47/2020). Nhưng có 1 "sơ hở" không rõ phải sơ hở hay không đó là Nghị định này quy định dữ liệu mở chính phủ cần được cơ quan quản lý có trách nhiệm ban hành.

Chính ông Bộ KH&ĐT lợi dụng ý này bảo rằng Bộ chưa ban hành dữ liệu đấu thầu là dữ liệu mở, chỉ là dữ liệu công khai thôi nên dauthau.info lượn đi đó bác.

 

[thanhp13]

Tình trạng dường như là Bộ muốn độc quyền dữ liệu, thông tin về đấu thầu, để phục vụ ý định sau này cái TT đó sẽ thương mại, kinh doanh các dữ liệu về đấu thầu như bán gói dịch vụ thông tin đấu thầu, tư vấn, đầu thầu thuê, sub sử dụng dữ liệu về đấu thầu,....

Cục quản lý đấu thầu không bao giờ được thương mại dữ liệu này đâu bác, nó chỉ có thể có công ty sân sau làm cái đấy thôi. Mà nó có nhiều năm nay rồi

 

[paulsteigel]

Bộ 4T có nghị định quy định về dữ liệu mở rồi đấy bác (nghị định 47/2020). Nhưng có 1 "sơ hở" không rõ phải sơ hở hay không đó là Nghị định này quy định dữ liệu mở chính phủ cần được cơ quan quản lý có trách nhiệm ban hành.

Chính ông Bộ KH&ĐT lợi dụng ý này bảo rằng Bộ chưa ban hành dữ liệu đấu thầu là dữ liệu mở, chỉ là dữ liệu công khai thôi nên dauthau.info lượn đi đó bác.

Cũng không hẳn thế cụ ơi, phải dựa vào Luật nó yêu cầu công khai gì thì phải làm vậy
Điều 8 Luật đấu thầu 2013 quy định rõ
Thông tư này cũng ghi rồi, giờ bên 4T làm sát ván thì Bộ KHĐT (MPI) cũng chả làm gì được mờ úp mở, họ chỉ có thể lấy lý do là vấn đề kỹ thuật thôi!

 

[paulsteigel]

vậy theo cụ

sau đợt này bonj đâuthau có bij sụp ko ạ?

e đang định mua dữ lieeuj bên nó vì muasamcong nhiều quá, dauthau nó soạn sawxn gói dữ liệu cho mình nên tiện hơn

Cụ đừng lo, nó kêu la ầm ĩ thế vì nó đang lo động thái đầu tiên cua Bộ là vậy, kêu mà bộ nhả thì nó không có nguy cơ bị đập tèo, còn không thì nó sẽ bị hạch đủ kiểu để tèo! Nếu nó khôn thì nó im lặng, đi chạy trước về thủ tục xuất bản thông tin và chủ động làm việc để có cơ chế nộp phí khai thác thông tin một cách phù hợp thì không ai đập được nó gục vì vi phạm các luật an ninh mạng, luật này luật kia.
Nếu không sẽ đầy thằng khác đứng lên chuyên làm việc thu thập thông tin từ mua sắm công thủ công .>> cụ yên cái tâm đê!