Cách tôi kiểm tra xem các tài liệu nghiên cứu có thực sự phù hợp hay không bằng cách sử dụng Elicit
Một trích dẫn không phải là một sự đồng thuận. Các bảng trích xuất của Elicit đã biến bài đánh giá tài liệu của tôi từ cảm nhận về những gì nghiên cứu tìm thấy thành một bảng có thể sắp xếp về những gì họ đo lường được.
Không có gì làm chậm quá trình đánh giá tài liệu bằng khoảng cách giữa trích dẫn và sự đồng thuận. Mười bài báo được trích dẫn để hỗ trợ cho một tuyên bố thường chứa ba thỏa thuận, năm thỏa thuận một phần và hai nghiên cứu sử dụng các phương pháp khiến chúng khó có thể so sánh được. Elicit là công cụ tôi sử dụng để tìm ra điều đó trước khi viết câu và bảng trích xuất chính là cơ chế.
Bắt đầu với một câu hỏi nghiên cứu thực sự, không phải một chủ đề. Elicit hoạt động tốt nhất khi diễn đạt theo cách người đánh giá sẽ hỏi: tác động của làm việc từ xa đến năng suất đo được trong các nghiên cứu có kiểm soát, chứ không phải năng suất làm việc từ xa. Chạy tìm kiếm, sàng lọc kết quả theo tiêu đề và phần tóm tắt với các cột liên quan của Elicit và thật kiên nhẫn: bốn mươi bài báo liên quan mà bạn sẽ không bao giờ đọc có giá trị ít hơn mười hai bài báo mà bạn có thể đọc. Các cột sàng lọc là nơi lưu số giờ.
Sau đó là bước làm cho Elicit khác biệt với một công cụ tìm kiếm thông minh hơn: trích xuất. Thêm các cột cho những yếu tố quyết định liệu các nghiên cứu có đồng ý hay không, cỡ mẫu, thiết kế nghiên cứu, thước đo kết quả, hướng tác động và dân số được nghiên cứu. Chạy trích xuất trên tập hợp đã sàng lọc của bạn và bạn sẽ có được một bảng có thể sắp xếp về những gì mỗi bài báo thực sự đã làm và tìm thấy. Trong quá trình đánh giá công việc từ xa của tôi, bảng ngay lập tức cho thấy rằng sự bất đồng trong tài liệu chủ yếu là sự bất đồng trong các thước đo kết quả, bản tự báo cáo so với kết quả được ghi lại, mà không có lượng đọc tóm tắt nào xuất hiện.
Sắp xếp và cắt bảng trước khi tin vào bất kỳ bản tóm tắt nào. Lọc theo thiết kế nghiên cứu và xem tuyên bố thu hẹp hoặc giữ nguyên vì các hiệu ứng tồn tại trong các thiết kế ngẫu nhiên và biến mất trong các cuộc khảo sát cắt ngang cho bạn biết trạng thái trung thực của lĩnh vực này. Xuất bảng và giữ nó làm ma trận bằng chứng của bạn, những người đánh giá tài liệu thực sự muốn và cập nhật nó khi Elicit tìm thấy tác phẩm mới hơn với cùng các cột trích xuất.
Kỷ luật giữ cho điều này trở nên trung thực: kiểm tra tại chỗ việc trích xuất. Tôi lấy bản PDF thực tế cho bất kỳ phát hiện nào mà tôi trích dẫn trực tiếp, mỗi phát hiện hai phút và tôi đã phát hiện đủ các mô tả sai, của tôi và của mô hình, để biết rằng bước này không phải là tùy chọn. Elicit là trợ lý nghiên cứu đọc nhanh hơn bạn và không bao giờ cảm thấy nhàm chán khi lập bảng; bạn vẫn là người quyết định ý nghĩa của cái bàn.