CHARMChoosing Human-Computer Intera

CHARM
Choosing Human-Computer Interaction (HCI) Appropriate Research Methods

Survey Methods: Questionnaires and Interviews

Ugur Kuter (ukuter@cs.umd.edu)
Cemal Yilmaz (cyilmaz@cs.umd.edu)

Department of Computer Science
University of Maryland
College Park , MD 20742 , USA

November 2, 2001

1 Introduction

Survey research is one of the most important areas of measurement in applied social research. The dictionary meaning of survey is: �Survey is a technique for gathering information from a large number of users� [Brehob, 2001]. A �survey� can be anything from a short paper-and-pencil feedback form to an intensive interview.

Surveys are an important technique used in Human-Computer Interaction (HCI) research. They provide feedback from the point of view of the users. They provide information regarding users� preferences and ideas about the design in many stages of the interface development. Users� reactions can have a strong impact on the design and development of an interface. However, not all surveys are useful. The data collected in a survey can be biased. This means that the answers to some kinds of questions - for instance, those related with time measurements or frequency of event occurrences - may not be reliable.

In general, the steps in designing and conducting a survey can be listed as follows [Trochim, 2000]:

Set the goals - What do you want to capture?
Decide on the target population and sample size - Who will you ask?
Determine the questions- What will you ask?
Pre-test the survey - Test the questions
Conduct the survey - Ask the questions
Analyze the data collected - Produce the report

The key step in designing a survey is setting the goals. The goals of the survey determine the target population and questions. If the goals are not clear, the result of the survey will be uncertain. Correctly determining the target population is critical; it should represent the targeted users of the interface and bias should be eliminated. This concept is known as sampling. Sampling is defined as �the act, process, or technique of selecting [...] a representative part of a population for the purpose of determining parameters or characteristics of the whole population� in Sampling In Research, which is a web tutorial on the subject by Mugo Fridah W.

In determining the questions, there are issues that must be considered such as type of questions, question contents, response format, question wordings, and question placing [Trochim, 2000]. The following paragraphs explain these issues briefly.

Researchers use three types of questions in surveys, namely multiple choice, numeric open-end (e.g., on the average, how much time do you spend per day on this system?) and text open-end (e.g. please give your comments about ...) [Trochim, 2000].

Mainly, there are two types of response format: structured response and unstructured response [Trochim, 2000]. Structured responses are very easy to be answered by the respondents but might not capture everything in the respondents' mind(s) (e.g. responses to multiple-choice questions). In unstructured responses, the respondents write down text as a response (e.g. responses to text open end questions). Questions should be clear and unambiguous. Also, the order of the questions matters. For example, the easier questions should be placed before the harder questions. The rationale behind this is to prevent respondent boredom at the beginning and to motivate them to complete the survey.

Researchers should prepare the questions and answer choices with a statistical method in mind, because they will be used to analyze the collected data at the end. However, not all the statistical methods might be applicable for a particular response type. For example, there is no statistical method that can analyze text open-end questions. There is a huge amount of literature regarding statistical data analysis. For example, a Summary of Survey Analysis Software is provided by Survey Research Methods Section (SRMS) of the American Statistical Association (ASA). Some useful links on statistical methods are �Statistical Data Analysis: Inferring from Data� and �Research Methods & Statistics Resources�.

Researchers should test the questions on a small sample of users, and they should also analyze the collected data with the planned statistical methods before the survey is conducted on a large scale. This gives the researcher a last chance to address possible problems. A survey can be created and applied at any step of a user interface design process. The rationale behind this is to identify the problems as early as possible to prevent researchers from wasting time and money [Hom, 1998].

While designing the survey, it is not sufficient to consider only these issues. Researchers should also be aware of the ethical issues in preparing, conducting, and analyzing the collected data from surveys. American Statistical Association provides �Ethical Guidelines for Statistical Practices.� These are general guidelines for researchers who do statistical analyses and/or conduct any type of experiment on human or animal subjects.

This report focuses on two forms of survey-research in detail: questionnaires and interviews. The following sections present the definitions, advantages and disadvantages of each survey-research method, as well as some commonly known examples from the literature and links to those examples. Finally, we conclude our discussion and provide some recommendations.

2 Survey Methods: Questionnaires

In usability glossary, [Brehob, 2001] defines a questionnaire to be "a form that people fill out, used to obtain demographic information and views and interests of those questioned". [Kirakowski, 1998] defines a questionnaire in a more structural way as "a method for the elicitation, and recording and collecting information". HCI researchers use questionnaires as tools (methods) to capture what is in users' mind(s) (elicitation). The data collected from a group of respondents (users) is recorded onto a permanent medium to be analyzed and referenced later.

There are two main types of questionnaires, namely mail questionnaires and on-line questionnaires. The latter can be divided further into three subgroups, i.e., e-mail questionnaires, computer-direct questionnaires, and Web-based questionnaires. This report investigates only the Web-based questionnaires.

As described in Survey Design, Questionnaire Design Tips by Creative Research Systems, mail questionnaires are sent to the respondents via surface mail. An important advantage of mail questionnaires is that they are inexpensive. They can also include pictures. Note that this is not possible with some survey methods e.g. phone interviews - which will be described in the next section. Another advantage is that mail questionnaires allow respondents to complete the questionnaire at a convenient time. This is not the case with phone or personal interviews as the respondents are obligated to the time slots provided by the interviewer.

Mail questionnaires also have some disadvantages. First, it may take several weeks to collect the responses, which may be too long. Second, the response rate is usually less than 5%. Finally, mail questionnaires could lead to a biased sample since, most of the time, researchers do not know the background of the respondents. To some extent, it is possible to collect information about the respondents' background by including related questions into the questionnaire.

Web-based questionnaires are rapidly gaining popularity as the Internet and World-Wide Web usage increases. Survey Design, Questionnaire Design Tips lists the advantages of web page surveys as follows: First of all, Web-based questionnaires are very fast. It is possible to get (a) large number of responses (e.g. several thousand responses). Secondly, the order of the questions (and even the number and type of questions) can be changed according to the respondents' answers. Finally, the questionnaire can use multimedia content (e.g. sounds, videos etc.), colors, fonts, and different formatting options.

Although the Internet is gaining popularity, it is still far from being universal. Therefore, Web-based questionnaires may not reflect the whole population. Also, Web-based questionnaires could lead to a biased sample because there is often no control over the respondents. People with a varying spectrum of background from all over the world can complete the questionnaire. Moreover, some of them may respond to the same questionnaire multiple times.

In general, questionnaires are designed to assess aspects of usability, the validity and/or reliability of human-computer interfaces [Pearlman, 1998]. In [Pearlman, 1998], some of the well-known questionnaires in HCI are listed as follows

Questionnaire for User Interface Satisfaction (QUIS), Univ. of Maryland , 1988
Perceived Usefulness and Ease of Use (PUEU), IBM, 1989
Nielsen's Attributes of Usability (NAU), Bellcore, 1993
Nielsen's Heuristic Evaluation (NHE), Bellcore, 1993
Computer System Usability Questionnaire (CSUQ), IBM, 1995
After Scenario Questionnaire (ASQ), IBM, 1995
Practical Heuristics for Usability Evaluation (PHUE), OSU, 1997
Purdue Usability Testing Questionnaire (PUTQ), Purdue Univ. , 1997

2.1 Example: The Questionnaire for User Interaction Satisfaction (QUIS)

QUIS is a tool developed by the Human-Computer Interaction Lab (HCIL) at the University of Maryland at College Park . QUIS aims to assess users' subjective satisfaction with specific aspects of the human-computer interface.

QUIS is a measure of users' overall system satisfaction. It also contains eleven specific interface factors that are organized hierarchically, namely screen factors, terminology and system feedback, learning factors, system capabilities, technical manuals, on-line tutorials, multimedia, voice recognition, virtual environments, internet acces

CHARM
Choosing Human-Computer Interaction (HCI) Appropriate Research Methods

Survey Methods: Questionnaires and Interviews

Ugur Kuter (ukuter@cs.umd.edu)
Cemal Yilmaz (cyilmaz@cs.umd.edu)

Department of Computer Science
University of Maryland
College Park , MD 20742 , USA

November 2, 2001

1 Introduction

Survey research is one of the most important areas of measurement in applied social research. The dictionary meaning of survey is: �Survey is a technique for gathering information from a large number of users� [Brehob, 2001]. A �survey� can be anything from a short paper-and-pencil feedback form to an intensive interview.

Surveys are an important technique used in Human-Computer Interaction (HCI) research. They provide feedback from the point of view of the users. They provide information regarding users� preferences and ideas about the design in many stages of the interface development. Users� reactions can have a strong impact on the design and development of an interface. However, not all surveys are useful. The data collected in a survey can be biased. This means that the answers to some kinds of questions - for instance, those related with time measurements or frequency of event occurrences - may not be reliable.

In general, the steps in designing and conducting a survey can be listed as follows [Trochim, 2000]:

Set the goals - What do you want to capture?
 Decide on the target population and sample size - Who will you ask?
 Determine the questions- What will you ask?
 Pre-test the survey - Test the questions
 Conduct the survey - Ask the questions
 Analyze the data collected - Produce the report

The key step in designing a survey is setting the goals. The goals of the survey determine the target population and questions. If the goals are not clear, the result of the survey will be uncertain. Correctly determining the target population is critical; it should represent the targeted users of the interface and bias should be eliminated. This concept is known as sampling. Sampling is defined as �the act, process, or technique of selecting [...] a representative part of a population for the purpose of determining parameters or characteristics of the whole population� in Sampling In Research, which is a web tutorial on the subject by Mugo Fridah W.

In determining the questions, there are issues that must be considered such as type of questions, question contents, response format, question wordings, and question placing [Trochim, 2000]. The following paragraphs explain these issues briefly.

Researchers use three types of questions in surveys, namely multiple choice, numeric open-end (e.g., on the average, how much time do you spend per day on this system?) and text open-end (e.g. please give your comments about ...) [Trochim, 2000].

Mainly, there are two types of response format: structured response and unstructured response [Trochim, 2000]. Structured responses are very easy to be answered by the respondents but might not capture everything in the respondents' mind(s) (e.g. responses to multiple-choice questions). In unstructured responses, the respondents write down text as a response (e.g. responses to text open end questions). Questions should be clear and unambiguous. Also, the order of the questions matters. For example, the easier questions should be placed before the harder questions. The rationale behind this is to prevent respondent boredom at the beginning and to motivate them to complete the survey.

Researchers should prepare the questions and answer choices with a statistical method in mind, because they will be used to analyze the collected data at the end. However, not all the statistical methods might be applicable for a particular response type. For example, there is no statistical method that can analyze text open-end questions. There is a huge amount of literature regarding statistical data analysis. For example, a Summary of Survey Analysis Software is provided by Survey Research Methods Section (SRMS) of the American Statistical Association (ASA). Some useful links on statistical methods are �Statistical Data Analysis: Inferring from Data� and �Research Methods & Statistics Resources�.

Researchers should test the questions on a small sample of users, and they should also analyze the collected data with the planned statistical methods before the survey is conducted on a large scale. This gives the researcher a last chance to address possible problems. A survey can be created and applied at any step of a user interface design process. The rationale behind this is to identify the problems as early as possible to prevent researchers from wasting time and money [Hom, 1998].

While designing the survey, it is not sufficient to consider only these issues. Researchers should also be aware of the ethical issues in preparing, conducting, and analyzing the collected data from surveys. American Statistical Association provides �Ethical Guidelines for Statistical Practices.� These are general guidelines for researchers who do statistical analyses and/or conduct any type of experiment on human or animal subjects.

This report focuses on two forms of survey-research in detail: questionnaires and interviews. The following sections present the definitions, advantages and disadvantages of each survey-research method, as well as some commonly known examples from the literature and links to those examples. Finally, we conclude our discussion and provide some recommendations.

2 Survey Methods: Questionnaires

In usability glossary, [Brehob, 2001] defines a questionnaire to be "a form that people fill out, used to obtain demographic information and views and interests of those questioned". [Kirakowski, 1998] defines a questionnaire in a more structural way as "a method for the elicitation, and recording and collecting information". HCI researchers use questionnaires as tools (methods) to capture what is in users' mind(s) (elicitation). The data collected from a group of respondents (users) is recorded onto a permanent medium to be analyzed and referenced later.

There are two main types of questionnaires, namely mail questionnaires and on-line questionnaires. The latter can be divided further into three subgroups, i.e., e-mail questionnaires, computer-direct questionnaires, and Web-based questionnaires. This report investigates only the Web-based questionnaires.

As described in Survey Design, Questionnaire Design Tips by Creative Research Systems, mail questionnaires are sent to the respondents via surface mail. An important advantage of mail questionnaires is that they are inexpensive. They can also include pictures. Note that this is not possible with some survey methods e.g. phone interviews - which will be described in the next section. Another advantage is that mail questionnaires allow respondents to complete the questionnaire at a convenient time. This is not the case with phone or personal interviews as the respondents are obligated to the time slots provided by the interviewer.

Mail questionnaires also have some disadvantages. First, it may take several weeks to collect the responses, which may be too long. Second, the response rate is usually less than 5%. Finally, mail questionnaires could lead to a biased sample since, most of the time, researchers do not know the background of the respondents. To some extent, it is possible to collect information about the respondents' background by including related questions into the questionnaire.

Web-based questionnaires are rapidly gaining popularity as the Internet and World-Wide Web usage increases. Survey Design, Questionnaire Design Tips lists the advantages of web page surveys as follows: First of all, Web-based questionnaires are very fast. It is possible to get (a) large number of responses (e.g. several thousand responses). Secondly, the order of the questions (and even the number and type of questions) can be changed according to the respondents' answers. Finally, the questionnaire can use multimedia content (e.g. sounds, videos etc.), colors, fonts, and different formatting options.

Although the Internet is gaining popularity, it is still far from being universal. Therefore, Web-based questionnaires may not reflect the whole population. Also, Web-based questionnaires could lead to a biased sample because there is often no control over the respondents. People with a varying spectrum of background from all over the world can complete the questionnaire. Moreover, some of them may respond to the same questionnaire multiple times.

In general, questionnaires are designed to assess aspects of usability, the validity and/or reliability of human-computer interfaces [Pearlman, 1998]. In [Pearlman, 1998], some of the well-known questionnaires in HCI are listed as follows

Questionnaire for User Interface Satisfaction (QUIS), Univ. of Maryland , 1988
 Perceived Usefulness and Ease of Use (PUEU), IBM, 1989
 Nielsen's Attributes of Usability (NAU), Bellcore, 1993
 Nielsen's Heuristic Evaluation (NHE), Bellcore, 1993
 Computer System Usability Questionnaire (CSUQ), IBM, 1995
 After Scenario Questionnaire (ASQ), IBM, 1995
 Practical Heuristics for Usability Evaluation (PHUE), OSU, 1997
 Purdue Usability Testing Questionnaire (PUTQ), Purdue Univ. , 1997

2.1 Example: The Questionnaire for User Interaction Satisfaction (QUIS)

QUIS is a tool developed by the Human-Computer Interaction Lab (HCIL) at the University of Maryland at College Park . QUIS aims to assess users' subjective satisfaction with specific aspects of the human-computer interface.

QUIS is a measure of users' overall system satisfaction. It also contains eleven specific interface factors that are organized hierarchically, namely screen factors, terminology and system feedback, learning factors, system capabilities, technical manuals, on-line tutorials, multimedia, voice recognition, virtual environments, internet acces

0/5000

Từ: -

Sang: -

Kết quả (Việt) 1: [Sao chép]

Sao chép!

QUYẾN RŨViệc lựa chọn phương pháp thích hợp nghiên cứu nhân-Computer Interaction (HCI)Khảo sát phương pháp: Câu hỏi và phỏng vấnUgur Kuter (ukuter@cs.umd.edu)Cemal Yilmaz (cyilmaz@cs.umd.edu)Vùng máy tính khoa họcĐại học MarylandCollege Park, MD 20742, Mỹ2 tháng 11 năm 20011 giới thiệuNghiên cứu khảo sát là một trong những lĩnh vực quan trọng nhất của đo lường trong nghiên cứu xã hội ứng dụng. Nghĩa từ điển của cuộc khảo sát: khảo sát là một kỹ thuật để thu thập thông tin từ một số lớn các người sử dụng [Brehob, 2001]. Một cuộc khảo sát có thể là bất cứ điều gì từ một hình thức giấy và bút chì ngắn thông tin phản hồi để một cuộc phỏng vấn chuyên sâu.Cuộc điều tra là một kỹ thuật quan trọng được sử dụng trong nghiên cứu con người-máy tính tương tác (HCI). Họ cung cấp thông tin phản hồi từ điểm nhìn của những người sử dụng. Họ cung cấp thông tin về sở thích người sử dụng và ý tưởng về việc thiết kế trong nhiều giai đoạn của sự phát triển giao diện. Phản ứng của người dùng có thể có một tác động mạnh mẽ về việc thiết kế và phát triển một giao diện. Tuy nhiên, không phải tất cả các cuộc điều tra được hữu ích. Dữ liệu thu thập trong một cuộc khảo sát có thể được thiên vị. Điều này có nghĩa rằng câu trả lời cho một số loại câu hỏi - ví dụ, những người liên quan với các phép đo thời gian hoặc các tần số của các sự kiện sự kiện - có thể không đáng tin cậy.Nói chung, các bước trong thiết kế và tiến hành một cuộc khảo sát có thể liệt kê như sau [Trochim, 2000]: Thiết lập các mục tiêu - làm những gì bạn muốn nắm bắt? Quyết định mục tiêu dân và mẫu kích thước - những người sẽ bạn yêu cầu? Xác định câu hỏi - những gì sẽ bạn yêu cầu? Trước khi thử nghiệm các cuộc khảo sát - kiểm tra các câu hỏi Tiến hành các cuộc khảo sát - hỏi những câu hỏi Phân tích các dữ liệu thu thập - sản xuất các báo cáoBước quan trọng trong việc thiết kế một cuộc khảo sát là thiết lập các mục tiêu. Mục tiêu của các cuộc khảo sát xác định mục tiêu dân và câu hỏi. Nếu mục tiêu là không rõ ràng, kết quả của cuộc khảo sát sẽ được không chắc chắn. Xác định chính xác mục tiêu dân là rất quan trọng; nó phải đại diện cho những người sử dụng nhắm mục tiêu của giao diện và thiên vị nên được loại bỏ. Khái niệm này được gọi là mẫu. Lấy mẫu được định nghĩa là các hành động, quá trình, hoặc các kỹ thuật của cách chọn [...] một phần đại diện của dân cho mục đích xác định tham số hay đặc điểm của toàn dân trong lấy mẫu trong nghiên cứu, đó là một hướng dẫn web về chủ đề bởi Mugo Fridah W.Trong việc xác định các câu hỏi, có những vấn đề phải được xem xét như loại câu hỏi, câu hỏi nội dung, định dạng phản ứng, tắc bảo hiểm câu hỏi, và câu hỏi đặt [Trochim, 2000]. Các đoạn sau đây giải thích những vấn đề này một thời gian ngắn.Các nhà nghiên cứu sử dụng ba loại câu hỏi trong cuộc điều tra, cụ thể là nhiều sự lựa chọn, số mở (ví dụ như, trên mức trung bình, bao nhiêu thời gian để bạn chi tiêu mỗi ngày trên hệ thống này?) và mở văn bản (ví dụ: xin vui lòng cung cấp cho ý kiến của bạn về...) [Trochim, 2000]. Chủ yếu, có hai loại định dạng phản ứng: cấu trúc phản ứng và phản ứng có cấu trúc [Trochim, 2000]. Phản ứng có cấu trúc rất dễ dàng để được trả lời bởi những người trả lời nhưng không có thể nắm bắt tất cả mọi thứ trong người trả lời mind(s) (ví dụ như các hồi đáp cho câu hỏi trắc). Trong phản ứng có cấu trúc, những người trả lời viết xuống văn bản như một phản ứng (ví dụ như là phản ứng cho văn bản cuối cùng mở câu hỏi). Câu hỏi phải rõ ràng và rõ ràng. Ngoài ra, thứ tự của những câu hỏi quan trọng. Ví dụ, các câu hỏi dễ dàng hơn nên được đặt trước khi các câu hỏi khó khăn hơn. Lý do đằng sau này là để ngăn ngừa bị chán nản lúc đầu và để khuyến khích họ để hoàn thành cuộc khảo sát.Các nhà nghiên cứu nên chuẩn bị những câu hỏi và trả lời sự lựa chọn với một phương pháp thống kê trong tâm trí, vì họ sẽ được sử dụng để phân tích các dữ liệu được thu thập vào cuối. Tuy nhiên, không phải tất cả các phương pháp thống kê có thể được áp dụng cho một loại phản ứng cụ thể. Ví dụ, có là không có phương pháp thống kê có thể phân tích văn bản câu hỏi mở. Có là một số lượng lớn của văn học liên quan đến phân tích dữ liệu thống kê. Ví dụ: một bản tóm tắt của cuộc khảo sát phân tích phần mềm được cung cấp bởi khảo sát nghiên cứu phương pháp phần (SRMS) của Hiệp hội thống kê Mỹ (ASA). Một số liên kết hữu ích trên phương pháp thống kê là phân tích dữ liệu thống kê: suy luận từ dữ liệu và phương pháp nghiên cứu & thống kê tài nguyên.Các nhà nghiên cứu nên kiểm tra các câu hỏi trên một mẫu nhỏ của người dùng, và họ cũng nên phân tích các dữ liệu thu thập được với các phương pháp thống kê kế hoạch trước khi các cuộc khảo sát được thực hiện trên một quy mô lớn. Điều này cho phép các nhà nghiên cứu một cơ hội cuối cùng để giải quyết vấn đề có thể. Một cuộc khảo sát có thể được tạo ra và áp dụng ở bất kỳ bước của quá trình thiết kế giao diện người dùng. Lý do đằng sau này là để xác định các vấn đề càng sớm càng tốt để ngăn chặn các nhà nghiên cứu từ lãng phí thời gian và tiền bạc [Hom, 1998].Trong khi thiết kế các cuộc khảo sát, nó là không đủ để xem xét chỉ những vấn đề này. Các nhà nghiên cứu cũng cần phải nhận thức của các vấn đề đạo Đức trong việc chuẩn bị, tiến hành, và phân tích các dữ liệu thu thập từ các cuộc điều tra. Hiệp hội thống kê Hoa Kỳ cung cấp các nguyên tắc đạo đức cho thống kê thực tiễn. đây là hướng dẫn chung để các nhà nghiên cứu những người làm phân tích thống kê và/hoặc thực hiện bất kỳ loại thử nghiệm trên các đối tượng của con người hoặc động vật.Báo cáo này tập trung vào hai hình thức khảo sát-nghiên cứu chi tiết: câu hỏi và phỏng vấn. Phần sau đây trình bày những định nghĩa, lợi thế và bất lợi của mỗi phương pháp nghiên cứu khảo sát, cũng như một số ví dụ thường được biết đến từ văn học và liên kết đến những ví dụ. Cuối cùng, chúng tôi kết luận các cuộc thảo luận của chúng tôi và cung cấp một số kiến nghị.2 khảo sát phương pháp: câu hỏiTrong khả năng sử dụng thuật ngữ, [Brehob, 2001] định nghĩa một bảng câu hỏi là "một hình thức mà người điền vào trong, được sử dụng để có được thông tin cá nhân và quan điểm và lợi ích của những người đặt câu hỏi". [Kirakowski, 1998] định nghĩa một bảng câu hỏi một cách Mies là "một phương pháp để elicitation, và ghi lại và thu thập thông tin". HCI nhà nghiên cứu sử dụng câu hỏi như là công cụ (phương pháp) để nắm bắt những gì là trong người dùng mind(s) (elicitation). Dữ liệu thu thập từ một nhóm người trả lời (người dùng) được ghi lại vào một phương tiện thường trực để được phân tích và tham khảo sau này.Không có hai loại chính của bảng hỏi, cụ thể là câu hỏi thư và bảng câu hỏi trực tuyến. Sau này có thể được phân chia tiếp thành ba nhóm, ví dụ, e-mail câu hỏi, câu hỏi trực tiếp máy tính và Web dựa trên câu hỏi. Báo cáo này điều tra các chỉ các trang Web dựa trên câu hỏi.Như được mô tả trong thiết kế khảo sát, lời khuyên thiết kế bảng câu hỏi của sáng tạo nghiên cứu hệ thống, câu hỏi thư được gửi đến những người trả lời qua thư bề mặt. Một lợi thế quan trọng của câu hỏi thư là rằng họ là không tốn kém. Họ cũng có thể bao gồm hình ảnh. Lưu ý rằng điều này là không thể với một số phương pháp khảo sát ví dụ như điện thoại phỏng vấn - mà sẽ được mô tả trong phần kế tiếp. Một ưu điểm khác là câu hỏi thư cho phép người trả lời để hoàn thành các câu hỏi tại một thời điểm thuận tiện. Đây không phải là trường hợp với điện thoại hoặc cuộc phỏng vấn cá nhân như những người trả lời có nghĩa vụ phải khe thời gian cung cấp bởi người phỏng vấn.Câu hỏi thư cũng có một số nhược điểm. Đầu tiên, nó có thể mất vài tuần để thu thập các phản ứng, mà có thể quá dài. Thứ hai, tỷ lệ phản ứng thường là ít hơn 5%. Cuối cùng, câu hỏi thư có thể dẫn đến một mẫu thành kiến kể từ, phần lớn thời gian, các nhà nghiên cứu không biết nền của những người trả lời. Để một số phạm vi, nó là tốt để thu thập thông tin về những người trả lời nền bằng cách bao gồm các câu hỏi liên quan vào các câu hỏi.Web dựa trên câu hỏi nhanh chóng đạt được phổ biến như Internet và World-Wide Web sử dụng tăng. Khảo sát thiết kế, lời khuyên thiết kế bảng câu hỏi liệt kê những lợi thế của trang web cuộc điều tra như sau: trước hết, bảng câu hỏi dựa trên Web là rất nhanh. Nó có thể để có được (a) số lớn các phản ứng (ví dụ như một vài nghìn hồi đáp). Thứ hai, thứ tự của các câu hỏi (và ngay cả số lượng và loại câu hỏi) có thể được thay đổi theo người trả lời câu trả lời. Cuối cùng, các câu hỏi có thể sử dụng nội dung đa phương tiện (ví dụ như âm thanh, video vv), màu sắc, phông chữ, và tùy chọn định dạng khác nhau.Mặc dù Internet là được phổ biến, đó là vẫn còn xa là phổ quát. Vì vậy, câu hỏi dựa trên Web có thể không phản ánh toàn dân. Ngoài ra, trang Web dựa trên câu hỏi có thể dẫn đến một mẫu thiên vị bởi vì thường là không kiểm soát những người trả lời. Những người có một quang phổ khác nhau của nền từ khắp nơi trên thế giới có thể hoàn thành các câu hỏi. Hơn nữa, một số người trong số họ có thể đáp ứng với các câu hỏi tương tự nhiều lần.Nói chung, câu hỏi được thiết kế để đánh giá các khía cạnh khả năng sử dụng, hiệu lực và độ tin cậy của con người-máy tính giao diện [Pearlman, 1998]. Trong [Pearlman, 1998], một số câu hỏi nổi tiếng ở HCI được liệt kê như sau Câu hỏi cho người dùng hài lòng giao diện (QUIS), đại học Maryland, 1988 Nhận thức hữu ích và dễ sử dụng (PUEU), IBM, 1989 Nielsen của thuộc tính của khả năng sử dụng (NAU), Bellcore, 1993 Của Nielsen Heuristic đánh giá (NHE), Bellcore, 1993 Máy tính hệ thống khả năng sử dụng bảng câu hỏi (CSUQ), IBM, 1995 Sau khi kịch bản câu hỏi (ASQ), IBM, 1995 Các chẩn đoán thiết thực cho khả năng sử dụng đánh giá (PHUE), đại học bang Oregon, 1997 Purdue khả năng sử dụng thử nghiệm bảng câu hỏi (PUTQ), đại học Purdue, 19972.1 ví dụ: Các câu hỏi cho sự hài lòng tương tác của người dùng (QUIS)QUIS là một công cụ phát triển bởi phòng thí nghiệm tương tác người-máy tính (HCIL) tại Đại học Maryland ở College Park. QUIS nhằm mục đích đánh giá sự hài lòng chủ quan của người dùng với khía cạnh cụ thể của con người-máy tính giao diện.QUIS là một thước đo của sự hài lòng tổng thể hệ thống của người dùng. Nó cũng có mười một yếu tố cụ thể giao diện được tổ chức hierarchically, cụ thể là màn hình yếu tố, thuật ngữ và hệ thống thông tin phản hồi, yếu tố học tập, khả năng hệ thống, hướng dẫn sử dụng kỹ thuật, hướng dẫn trực tuyến, đa phương tiện, nhận dạng giọng nói, môi trường ảo, internet Access

đang được dịch, vui lòng đợi..

Kết quả (Việt) 2:[Sao chép]

Sao chép!

CHARM
Chọn Human-Computer Interaction (HCI) thích hợp phương pháp nghiên cứu Phương pháp khảo sát: Các bảng câu hỏi và phỏng vấn Ugur Kuter (ukuter@cs.umd.edu) Cemal Yilmaz (cyilmaz@cs.umd.edu) Sở Khoa học máy tính Đại học Maryland College Park, MD 20742, USA 02 Tháng 11 2001 1 Giới thiệu nghiên cứu khảo sát là một trong những lĩnh vực quan trọng nhất của đo lường trong nghiên cứu xã hội ứng dụng. Ý nghĩa từ điển của cuộc khảo sát là: Điều tra là một kỹ thuật để thu thập thông tin từ một số lượng lớn người dùng [Brehob, 2001]. Một cuộc khảo sát có thể là bất cứ thứ gì từ một tờ giấy và bút chì mẫu phản hồi ngắn để một cuộc phỏng vấn chuyên sâu. Khảo sát là một kỹ thuật quan trọng được sử dụng trong Human-Computer Interaction (HCI) nghiên cứu. Họ cung cấp thông tin phản hồi từ các quan điểm của người sử dụng. Họ cung cấp các thông tin liên quan đến sở thích và ý tưởng về thiết kế trong nhiều giai đoạn của sự phát triển giao diện người dùng. Người dùng phản ứng có thể có một tác động mạnh mẽ vào việc thiết kế và phát triển một giao diện. Tuy nhiên, không phải tất cả các cuộc điều tra có ích. Các dữ liệu thu thập được trong cuộc điều tra có thể được thiên vị. Điều này có nghĩa rằng các câu trả lời cho một số loại câu hỏi - ví dụ, những người có liên quan với các phép đo thời gian hoặc tần số xuất hiện của sự kiện - có thể không đáng tin cậy. Nhìn chung, các bước trong việc thiết kế và tiến hành một cuộc khảo sát có thể được liệt kê như sau [Trochim, 2000 ]: ? Thiết lập mục tiêu - Điều gì làm bạn muốn chụp ? Quyết định về đối tượng và kích thước mẫu - bạn sẽ hỏi ai ? Xác định questions- gì bạn sẽ hỏi Pre-test khảo sát - kiểm tra các câu hỏi Tiến hành khảo sát - Hỏi các câu hỏi Phân tích các dữ liệu thu thập được - Sản xuất báo cáo Các bước quan trọng trong việc thiết kế một cuộc khảo sát được thiết lập các mục tiêu. Các mục tiêu của cuộc điều tra xác định các mục tiêu dân số và các câu hỏi. Nếu mục tiêu không rõ ràng, kết quả của cuộc khảo sát sẽ không chắc chắn. Xác định một cách chính xác các mục tiêu dân số là rất quan trọng; nó phải đại diện cho người dùng mục tiêu của giao diện và thiên vị nên loại bỏ. Khái niệm này được gọi là lấy mẫu. Lấy mẫu được định nghĩa là hành động, quá trình, hoặc kỹ thuật lựa chọn [...] một phần đại diện của một số dân với mục đích xác định các thông số, đặc tính của toàn bộ dân số trong mẫu Trong nghiên cứu, đó là một trang web hướng dẫn trên chủ đề bằng Mugo Fridah W. Khi xác định các câu hỏi, có những vấn đề cần phải được xem xét như là loại câu hỏi, nội dung câu hỏi, định dạng phản ứng, từ ngữ câu hỏi, và câu hỏi đặt [Trochim, 2000]. Các đoạn sau đây giải thích các vấn đề một cách ngắn gọn. Các nhà nghiên cứu sử dụng ba loại câu hỏi trong cuộc khảo sát, cụ thể là nhiều lựa chọn, số mở-kết thúc (ví dụ, trên trung bình, bao nhiêu thời gian bạn dành cho mỗi ngày trên hệ thống này?) và văn bản mở-kết thúc (ví dụ: xin vui lòng cho ý kiến của bạn về ...) [Trochim, 2000]. Chủ yếu, có hai loại định dạng phản ứng: phản ứng có cấu trúc và phi cấu trúc đáp ứng [Trochim, 2000]. Phản hồi có cấu trúc là rất dễ dàng để được trả lời bởi những người trả lời, nhưng có thể không nắm bắt tất cả mọi thứ trong tâm trí của người trả lời (s) (ví dụ như phản ứng với câu hỏi trắc nghiệm). Trong phản ứng không có cấu trúc, những người trả lời viết ra văn bản như là một phản ứng (ví dụ như phản ứng với văn bản câu hỏi kết thúc mở). Câu hỏi phải rõ ràng và không mơ hồ. Ngoài ra, thứ tự của các câu hỏi quan trọng. Ví dụ, các câu hỏi dễ dàng hơn nên được đặt trước các câu hỏi khó hơn. Lý do đằng sau này là để ngăn chặn đơn chán nản ngay từ đầu và để khuyến khích họ hoàn thành việc khảo sát. Các nhà nghiên cứu cần phải chuẩn bị những câu hỏi và trả lời với một sự lựa chọn phương pháp thống kê trong tâm trí, vì họ sẽ được sử dụng để phân tích các dữ liệu thu thập được ở cuối. Tuy nhiên, không phải tất cả các phương pháp thống kê có thể được áp dụng cho một loại phản ứng cụ thể. Ví dụ, không có phương pháp thống kê để có thể phân tích văn bản câu hỏi mở. Có một số lượng lớn các tài liệu liên quan đến phân tích dữ liệu thống kê. Ví dụ, một Tóm tắt Khảo sát Phần mềm phân tích được cung cấp bởi Khảo sát phương pháp nghiên cứu Mục (SRMS) của Hiệp hội thống kê Mỹ (ASA). Một số liên kết hữu ích về phương pháp thống kê là thống kê phân tích dữ liệu: Suy luận từ dữ liệu và phương pháp nghiên cứu và thống kê tài nguyên. Các nhà nghiên cứu nên kiểm tra các câu hỏi trên một mẫu nhỏ của người dùng, và họ cũng nên phân tích các dữ liệu thu thập được với các phương pháp thống kê dự kiến trước khi các cuộc khảo sát được tiến hành trên quy mô lớn. Điều này cho phép các nhà nghiên cứu một cơ hội cuối cùng để giải quyết vấn đề tốt. Một cuộc khảo sát có thể được tạo ra và áp dụng tại bất kỳ bước của một quá trình thiết kế giao diện người dùng. Lý do đằng sau này là để xác định các vấn đề càng sớm càng tốt để ngăn chặn các nhà nghiên cứu từ lãng phí thời gian và tiền bạc [Hom, 1998]. Trong khi thiết kế các cuộc khảo sát, nó không phải là đủ để chỉ xem xét những vấn đề này. Các nhà nghiên cứu cũng cần phải nhận thức được các vấn đề đạo đức trong việc chuẩn bị, thực hiện và phân tích các dữ liệu thu thập được từ các cuộc điều tra. .. Hiệp hội thống kê Mỹ cung cấp hướng dẫn đạo đức cho thực hành thống kê Đây là những hướng dẫn chung cho các nhà nghiên cứu người làm phân tích thống kê và / hoặc thực hiện bất kỳ loại thí nghiệm trên đối tượng con người hay động vật Báo cáo này tập trung vào hai hình thức khảo sát nghiên cứu một cách chi tiết: các câu hỏi và các cuộc phỏng vấn. Các phần sau đây trình bày các định nghĩa, lợi thế và bất lợi của từng phương pháp khảo sát nghiên cứu, cũng như một số ví dụ thường được biết đến từ các tài liệu và các liên kết đến những ví dụ. Cuối cùng, chúng tôi kết luận cuộc thảo luận của chúng tôi và cung cấp một số kiến nghị. 2 Phương pháp khảo sát: Bảng câu hỏi Trong khả năng sử dụng thuật ngữ, [Brehob, 2001] định nghĩa một bảng câu hỏi là "một hình thức mà mọi người điền vào, được sử dụng để thu thập thông tin và quan điểm nhân khẩu học và lợi ích của người được hỏi ". [Kirakowski, 1998] định nghĩa một bảng câu hỏi một cách cơ cấu hơn là "một phương pháp cho sự khám phá, và ghi âm và thu thập thông tin". Các nhà nghiên cứu sử dụng bảng câu hỏi HCI như các công cụ (phương pháp) để nắm bắt những gì đang ở trong tâm trí của người sử dụng (s) (gợi mở). Các dữ liệu thu thập được từ một nhóm người được hỏi (người sử dụng) được ghi vào một phương tiện thường trực để được phân tích và được tham khảo sau này. Có hai loại chính của câu hỏi, cụ thể là gửi câu hỏi và các câu hỏi trên mạng. Sau này có thể được chia ra làm ba nhóm, tức là, e-mail câu hỏi, câu hỏi máy tính trực tiếp, và bảng câu hỏi dựa trên Web. Báo cáo này chỉ điều tra các câu hỏi dựa trên Web. Như được mô tả trong thiết kế khảo sát, câu hỏi Mẹo thiết kế bởi Research Creative Systems, câu hỏi mail được gửi cho bị đơn qua thư bề mặt. Một lợi thế quan trọng của câu hỏi mail là họ không tốn kém. Họ cũng có thể bao gồm hình ảnh. Lưu ý rằng điều này là không thể với một số phương pháp điều tra, ví dụ như các cuộc phỏng vấn điện thoại - mà sẽ được mô tả trong phần tiếp theo. Một lợi thế là câu hỏi trả lời thư cho phép để hoàn thành các câu hỏi tại một thời điểm thuận tiện. Đây không phải là trường hợp với điện thoại hoặc các cuộc phỏng vấn cá nhân là người trả lời được buộc vào các khe thời gian được cung cấp bởi người phỏng vấn. câu hỏi Mail cũng có một số nhược điểm. Đầu tiên, nó có thể mất vài tuần để thu thập các phản ứng, có thể là quá dài. Thứ hai, tỷ lệ đáp ứng thường là ít hơn 5%. Cuối cùng, câu hỏi email có thể dẫn đến một mẫu thiên vị vì, hầu hết thời gian, các nhà nghiên cứu không biết nền của người trả lời. Ở một mức độ, nó có thể thu thập thông tin về nền của người trả lời bằng cách bao gồm các câu hỏi liên quan vào các bảng câu hỏi. câu hỏi dựa trên Web đang được nhanh chóng phổ biến như Internet và sử dụng Web World-Wide tăng. Thiết kế khảo sát, thiết kế câu hỏi gợi liệt kê những ưu điểm của các cuộc khảo sát trang web như sau: Trước hết, câu hỏi trên web là rất nhanh. Nó có thể cho phép (a) số lượng lớn các phản ứng (ví dụ một vài ngàn phản ứng). Thứ hai, thứ tự của các câu hỏi (và ngay cả số lượng và loại câu hỏi) có thể được thay đổi theo câu trả lời của người trả lời. Cuối cùng, các câu hỏi có thể sử dụng nội dung đa phương tiện (ví dụ như âm thanh, video, vv), màu sắc, phông chữ, và các tùy chọn định dạng khác nhau. Mặc dù Internet đang trở nên phổ biến, nó vẫn còn xa mới là phổ quát. Vì vậy, câu hỏi dựa trên Web có thể không phản ánh toàn bộ dân số. Ngoài ra, các câu hỏi dựa trên Web có thể dẫn đến một mẫu thiên vị vì thường là không kiểm soát được hỏi. Những người có một quang phổ khác nhau của nền từ khắp nơi trên thế giới có thể hoàn thành các câu hỏi. Hơn nữa, một số trong số họ có thể đáp ứng những câu hỏi nhiều lần như vậy. Nói chung, các câu hỏi được thiết kế để đánh giá các khía cạnh của khả năng sử dụng, tính hiệu lực và / hoặc độ tin cậy của các giao diện người-máy tính [Pearlman, 1998]. Trong [Pearlman, 1998], một số trong những câu hỏi nổi tiếng trong HCI được liệt kê như sau Bảng câu hỏi cho giao diện người dùng hài lòng (QUIS), Univ. Maryland, 1988 Nhận thức hữu dụng và Dễ sử dụng (PUEU), IBM, 1989 Thuộc tính của Usability (NAU), Bellcore, 1993 Nielsen của Heuristic đánh giá của Nielsen (NHE), Bellcore, 1993 hệ thống máy tính Usability Questionnaire (CSUQ), IBM, 1995 Sau khi Kịch bản câu hỏi (ASQ), IBM, 1995 Heuristics thực hành cho Usability Đánh giá (PHUE), OSU, 1997 Kiểm tra Questionnaire Purdue Usability (PUTQ), Purdue Univ. , Năm 1997 2.1 Ví dụ: Bảng câu hỏi cho Tương tác người dùng hài lòng (QUIS) QUIS là một công cụ được phát triển bởi các tương tác của con người-máy tính Lab (HCIL) tại Đại học Maryland ở College Park. QUIS nhằm đánh giá của người sử dụng sự hài lòng chủ quan với các khía cạnh cụ thể của giao diện người-máy tính. QUIS là một biện pháp của người sử dụng sự hài lòng tổng thể của hệ thống. Nó cũng chứa các yếu tố mười một giao diện cụ thể được tổ chức theo thứ bậc, cụ thể là các yếu tố màn hình, thuật ngữ và thông tin phản hồi hệ thống, các yếu tố học tập, khả năng hệ thống, hướng dẫn kỹ thuật, hướng dẫn trên mạng, đa phương tiện, nhận dạng giọng nói, môi trường ảo, acces internet

đang được dịch, vui lòng đợi..

Kết quả (Việt) 3:[Sao chép]

Sao chép!

đang được dịch, vui lòng đợi..

Các ngôn ngữ khác

Hỗ trợ công cụ dịch thuật: Albania, Amharic, Anh, Armenia, Azerbaijan, Ba Lan, Ba Tư, Bantu, Basque, Belarus, Bengal, Bosnia, Bulgaria, Bồ Đào Nha, Catalan, Cebuano, Chichewa, Corsi, Creole (Haiti), Croatia, Do Thái, Estonia, Filipino, Frisia, Gael Scotland, Galicia, George, Gujarat, Hausa, Hawaii, Hindi, Hmong, Hungary, Hy Lạp, Hà Lan, Hà Lan (Nam Phi), Hàn, Iceland, Igbo, Ireland, Java, Kannada, Kazakh, Khmer, Kinyarwanda, Klingon, Kurd, Kyrgyz, Latinh, Latvia, Litva, Luxembourg, Lào, Macedonia, Malagasy, Malayalam, Malta, Maori, Marathi, Myanmar, Mã Lai, Mông Cổ, Na Uy, Nepal, Nga, Nhật, Odia (Oriya), Pashto, Pháp, Phát hiện ngôn ngữ, Phần Lan, Punjab, Quốc tế ngữ, Rumani, Samoa, Serbia, Sesotho, Shona, Sindhi, Sinhala, Slovak, Slovenia, Somali, Sunda, Swahili, Séc, Tajik, Tamil, Tatar, Telugu, Thái, Thổ Nhĩ Kỳ, Thụy Điển, Tiếng Indonesia, Tiếng Ý, Trung, Trung (Phồn thể), Turkmen, Tây Ban Nha, Ukraina, Urdu, Uyghur, Uzbek, Việt, Xứ Wales, Yiddish, Yoruba, Zulu, Đan Mạch, Đức, Ả Rập, dịch ngôn ngữ.